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1-1: 机 率 概 
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El 





2% Ж 90,19] 


。 委 铜板 看 到 正面 机 率 为 0.52 
АКЕ # 2 60% 
° ENJA TIFE в 25 1/216 
。 那 ... 椅 子 单 脚 站 三 天 三 夜 的 机 率 为 ? 
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我 和 我 的 小 伙伴 们 都 惊 休 了 ! 


yes123 求 职 网 ”新闻 发 言 台 Mi 





€] X 91 ЗК тыз 


Ghe d'ibertn Times “社会 新 闻 





自由 新 闻 影音 娱乐 读者 圈 地 旅游 玩乐 好 康 报 报 TAIPEI TIMES Blog n 


T REMM 上 BR > 社会 新 闻 
Н asat 、 





焦点 新 闻 上 2009-2-10 字 型 : 由 | 看 推荐 | #= | 列 印 | 85 
T pamm _ 
Л зака 、 21.198 EB В ük 3 < 
T ЕЕ e 
— BER > ЖСК NT IB 6 R 818 
由 爱心 暖流 à 办 法 事 时 ， 住 持 温 振 松 突然 起 此 ， 随 手 
Е 自由 言论 , 拿 砚 车 在 桌 上 “， 访 小 神 辐 单 脚 站 立 ， 持 
E mannm e 续 3 天 3 夜 化 ， 效 神明 同意 才 请 下 来 。 消 
T masm . Вн. Беан iter 
E 体育 新 闻 上 席 姜 恨 明 说 ， 这 如 同 搬出 立 签 一 样 罕 
7 вые P? 
- ARNM > (EX : EREM ) ЗЕЕ KE S HB XZ 6 RZ 
П оная > i aa : 
| 法 事 时 ， 住 持 温 振 松 突然 起 此 ， 随 手 拿 碗 著 
e WARE 上 在 桌 上 ， 计 小 神 辐 单 脚 站 立 ， 持 篇 3 天 3 夜 
В EAZA a (& ^ ETBBI]EUT IS TUR - ñ e mib Е 
T 流行 消费 . 喷 喷 称 奇 ， 北 埔 乡 代 会 主席 姜 良 明说 ， 这 如 
П mixti » BRETA- EFR. 
四 ”生活 副刊 + ( 图 文 : 记者 陈仪 珊 ) 
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z = Тик í AREE... 


° ЖЖ = 0. 6 RRES 总 心 2 


* 4E 1] 23-38 418] [5] 8 90] IP] Zo Е : 
一 距离 = 1.23 2 RATE 意思 7 
代表 1.23 x 一 一 一 一 WP PrE BJ EB EE 





299792458 
一 时 间 = 8.2 秒 是 什么 意思 ? 
代表 8.2 x 919263170 [E BASE Pa + PS 2m Hp 
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我 们 该 怎 广 理 解 机 率 = 0.6? 


=й 7 m 


Wheel of Fortune 


( 贺 周 长 度 为 1 ) 
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=й 7 m 


Wheel of Fortune 


—fF SB SE TERES = 
п] ERE Z3 n] BE TE BR s= 288 27 i 


' X BEREA 0.68543 Е. 


( 贺 周 长 度 为 ) 





各 件 事情 强 生机 率 是 一 标的 ! 
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为 什么 我 们 要 研究 机 率 ? 


° 我 们 对 这 个 世界 了 解 的 太 少 
这 世界 的 运作 有 很 多 是 未 知 的 

。 世 问 事 不 见得 都 是 必然 的 (deterministic ) 
有 很 多 事情 是 有 随机 性 的 (random ) 








15 E EP St šT a XX 


о ЖЖ: 
一 机 对 模型 已 知 ， Rd EB Kip e de 
— Ex: €, ЖАР вин? 

° 统计 : 

— J& AE XR A Ж Aa , S SP € ИД тв) Яй Bat &5 КР 
Ж Жж д 

— Ех: a ыйы ‚ SK ku £ b H 3, 2 18 TUM ? 
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1-2: 集合 ЕН 


“ “| гаа ЕЖЕ, 的 机 率 = 0.1 
P(ER4E ERR IRAB) = 0.1 





[кЖк 978 ЕН хе : 事件 ， 而 事件 ， 是 一 
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人 2 人 2 >— 5 33 
集合 论 名 词 复 者 


л & (Element) 

Ех: F Жс op S op SE Oo 
集合 (Set) 

一 Ex: 9 J А = 

- Ex: HEAKKE B =| (wg PU) 
子 集合 (Subset) 

Ех: жж C — (TB, 5, 5 ) 


ВСЕ RTA: 
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集合 论 名 词 复 习 


° FR — = 

-Ex s= 
(ERG Empty Se) 

— Ех: Ф =í) 
° 交集 (Intersection) 


— Ex: яна Jš Jë H Sk S = 


рро of EE, jo 








人 2 人 2 >= 3 
集合 论 名 词 复 站 


° 联 集 (Union) 
一 Ex: яя А = 
EB 


AU B = (S, ==, Н, 5} 


1% + (Complement) 


 EGRAE C = ñ AA 


Æ Е (Difference) : X— V= {有 在 站 但 不 在 了 中 的 
RAJ 








一 Ex: 8 — Н = C В = (É 
< j Ё INSS ANN — ~ 
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KN IAGS 
集合 论 名 词 复 站 


° 不 相交 (Disjoint) : 
ju X Y Y = ф Э X, Y 不 相交 
— Ex: 








° Z Jf (Mutually Exclusive) : = 4- X4, X5, ..., Xn Е 
两 个 集合 Ар А, 都 不 相交 ， Я # 4145 X1 X2, eon 这 群集 合 
互 不 
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De Morgan s Law 定理 


* De Morgan s Law : 


(AU В) = А° n B° 


[— UN. 
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De Morgan s Law 2$ 8H 


° De Morgan s Law : 
(AU B) = A n B^ 
` UE 


=», < 
Assume хе (АПВ) Assume x є A В“ 
= хе АПВ >x g Aand хє В 





хе A and x # B If xe(ANBÝ 


— хє А“ апа хє В — xe А ПВ“) | хєАПВ => хєАогхє В < 
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sie (4^ B^) Thus x < (АГВ)1> (4^. B^)c(A В) 





1-3: #22 #5 
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Ж Бә: (Experiment) 





° 一 个 机 率 “ 实验 | 包含 了 | ” 
? 8% (procedures) ` $728 (model) ` S Zt (observations) 


一 Ex: ЖЖ А-Я 
УЖ: “伸手 取 起 果 上 二 有 明 ， 么 握 和 后 ， 手 微微 开口 后 向 内 吹 口 气 。 
之 后 默 祷 ， 再 将 般 丢 入 碗 中 ， 直 至 停止 为 止 。 | 
”模型 : (1, 1)、(1,2)、...、(6, 6) 等 发 生机 会 均等 
”观察 : (6, 6) 
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+ ж (Outcome) 


ОАЖ | 是 实验 中 可 能 的 结果 
一 Ex: 4o 4875 ñ 


— Ex: 看 到 华南 虎 


1ГЕ НУ ` FARY 


— Ex: 2 
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样本 空间 (Sample Space) 
° “样本 空间 | 是 机 率 实 验 所 有 


可 能 的 结果 的 集合 ， 通 常用 5S 来 表示 
— Ex: 4) JE 8 


5 = { МИ ` = } 





— Ex: i$ & = X лы ^ за E K d) £ Ж 





亲本 空间 (Sample Space) 
— Ex: € XE 2 $938 R 
S = [0,1) 





$ = [0,1) x [0, 1) 
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事件 (Event) 


° 上 事件， 指 的 是 对 於 实验 结果 的 某 种 和 分 述 。 
’ 机 率 就 是 在 讲 实验 结果 符合 某 事件 敏 述 的 机 会 多 大 
在 数学 上 ，“ 事件 | 可 以 看 成 是 ' 结果 | 的 集合 ， 亦 即 是 “样本 空间 | 
的 子 集 。 
一 Ex: 台 大 生 的 上 课 出 席 状 涡 
| 结果 Же: 








”事件 1 : 有 出 席 E= { 淮 时 、 退 到 } 
”事件 2 : 20828 5 E= REFI) ` ШЖ) 
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事件 (Event) 


( BRRR ` JSE ER ) 


一 Ех: PHH ^ o NÉ 2 3 — k Z--F 3k S ЕХ AGER 
。 事件 1 : 小 明 赢 ; E, = 
{(2,1), (3, 1), (3,2), (4, 1), (4,2), (4, 3), (5, 1), (5,2), (5,3), (5,4), (6,1), (6,2), (6,3), (6, 4), (6,5)} 


` 事件 2 : ЛЕД: Е,= 











{(1,2), (1,3), (2,3), (1,4), (2,4), (3,4), (1,5), (2,5), (3,5), (4,5), (1,6), (2,6), (3,6), (4,6), (5,6)} 


° 事件 3 : 平手 ;上 ;= 
{(1,1), (2,2), (3,3), (4,4), (5,5), (6,6)} 
对 於 一 个 实验 而 言 ， 究 竟 有 多 少 个 可 能 的 事件 呢 ? 
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事件 空间 (Event Space) 
一 Ex: 4 AIRE d u 





( ), GEI), GEFI, (HS SA), 
(EIF, ЕЯ, CREE IJ, ДЕЖ), 人 准时 , Н), 
CERS, MESI], ERA) 
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事件 空间 (Event Space) 





若 本 空间 5 = (04,025, On} A пі | 结果 
一 “事件 空间 = 
{ 5 {01}, {02}, a On), 


{01, 02}, {01, 03}, {01, On}, {02, 03}, ..., {02,0%}... 104 1,04] 


{01, 02, 03}, ... , {01, 02, 03, 04}, ...,104,05, ..., Олл}... {01, 02, ... 





< / 
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事件 空间 (Event Space) 


| майы ы, x Hg EX 


° 所 以 机 率 上 
机 率 函 数 是 从 了 事件 空间 ， 映 射 到 [O, 1] 


Р: Г ЕВЕ] | > [0,1] 
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ЖЕ + XB E] А 


”1-1: а 
一 如何 理解 机 率 = 0.6 85 3 à? 
。 1-2: Е 4 





一 ЕЖЕ ` Nous `~ Z Jf ` De Morgan's Law 
。 1-3: HE S] 
一 Фа АЖ ` z 事件 、 事 件 空 间 
一 ЖЕКА Ж Я 
它 是 事件 的 函数 (你 给 一 个 事件 ， 它 吐 回 一 个 数字 给 你 
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P a 
N 


AREIA 某 内 成 


fu Ei: who. VL я ЕЕ: ЕЁ: [acebook сот pref, Ё 
ЕЛА: рор Мос ces edu tw 
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本 过 主题 概述 


* 2-1: 14% АНЯ 
* 2-2: ЖЕЖ F 
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2-1: НЕ 


25318 


—-“ Sa 
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公理 (Axioms) 
° 近代 数学 第 以 数 休 公理 作为 整套 
理论 的 基石 
一 Ex: 线性 代数 |8 公理 ,公理 一 : ac b =Ьча... 
Нд 是 | 藉 过 身 就 过 啊 ! ( 容 头 过 身 веха) 
”公理 可 否 被 证 明 ? 
` ХЕЕЕ ЛЕ? 
什么 样 的 数学 最 属 害 9 дамон даних инат 
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Dept. of EE, Nation 





| e á - 
gud por on png erere een m 公理 3 SERE T SE EHE BE PRESE DAR EZ 1 


ZE +T + 2 É 2 PE E 





Ñ Ac: „йа те 为 何 ? 


4ce={ [v] 6, 4) 
> Р(Асе) = Р{|% |} +Р{ 9} + P( €) + POR) 


41 
52 13 
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T 公理 3 





公理 衍生 之 机 率 性 质 





° ж E = {01, 02, ..., On} Ё N 
Я] P(E) = Р(101}) + РЦ0>}) + + P(105)) 


Е = {01} U {02} U = U {0n} 
{01}, 102}, — (041 E FF 


> P(E) = P((041) + Р({02}) + Р({оз}) 十 … 
T 公理 3 





公理 衍生 之 机 率 性 质 
: Рф) = 0 


ЕЕ: Sn d = 0 > 5, ф BFF 
ЛОХ S = $ u o 





= P(S) = P(SU ф) pt) + Р(ф) 
> Р(ф) = 0 
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公理 衍生 之 机 率 性 质 
- P(A) = 1 — P(A^) 
证 明 : Ana = 9 > A,4° НЕ 
ЛХ S = A Ú Ac 





> P(S) = P(A) + Р(А°) 
1 公理 3 


> 1 = P(A) + P(A“) > P(A) = 1 — P(A°) 
T 公理 2 





NEIT E ZIE E R 
* P(A) = P(A — B) + P(A n B) 


А = ( ) чу (АПВ 
>Р(А) =Р(А- B) + P(A n B) 
1 公理 3 








公理 衍生 之 机 率 性 质 





P(A U B) 
=P(A—B) + Р(АП В) + Р(В – А) 





= P(A) + Р(В) — Р(А П B) 


а = of. Yeh, Pin ані Rei а 11 


Dept. of ЕЕ, 






公理 衍生 之 机 率 性 质 





一 Ex: Ж A FER 48 Ж E—48 A ^ JL, A. > #H ЖЭ. Лс sux S М. 
№ 2 49] ? 
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ЗЕ СЖ 


° VIR GERE: Р 
= Су, Со, ..., Су АЖА CUC U -:: U С„ = 5 


则 对 任何 事件 4 : P(A) = Р(А п С,) + Р(Ап С) +... + P(A n C,) 
T 公理 3 








EI 
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公理 衍生 之 机 率 性 质 


一 Ex: 阿 宅 心仪 某 可 党 女 店员 。 她 的 笑容 打开 了 他 封 
闭 的 心 。 阿 宅 注 意 到 她 笑容 会 党 生意 的 影 纸 ， 於 是 
每 天 忠实 记录 该 店 生 意 与 她 有 乱 对 他 笑 。 店 生意 有 
Ao BRZE 而 她 有 笑 、 怒 二 驴 。 根 据 记录 : 

( 


ç = | r> 





“v, 2 + 


1 2 
п п = 一 一 一 Ма n 4X — 
OX) 39: 80 йй) >50 


20 20 
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公理 衍生 之 机 率 性 质 
` ж Ac B, R| P(A) < P(B). 
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Boole's Ж € x 


° EHE ПЛАЗ Ai, A2, … Ап 
"s, 





P(Ui-4 Ai) € Xi-1P(AQ) 








Bonferroni's 不 等 式 





° {HEŠ ПЕН: А+,А»,..., An 
fa, 
P(N} Aj) 2 1- У" P(Af) 








Ж Bp rJ а 
*AERSDEGSCCTR ? 
° ZR = АННЕ ET 
° 机 对 公理 如 何 衍生 各 梯 的 性 里 ? 
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22. 条 件 机 率 


25318 


—-“ Sa 
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概述 与 范例 


° 机 率 常 反映 我 们 对 某 些 事情 的 
了 解 程度 
一 Ex: ом, Ни ЕЕ 
BEA A X B zx, C z, D Wa e 22 1/4 
— Ех: Я Ж$ ® нуж HE 考试 选择 题 正 
HFA A 2 ж 3E 1 Fp 0 
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概述 与 范例 


"在 得 知 其 他 某 些 事情 发 生 和 后 ， @ 
我 们 对 事情 的 了 解 可 能 会 有 所 改变 
— Ex: ОЕ АЁ AR SEP ЕЕ ' Rs 


== 


一 在 此 事 发 生 和 后 ， 对 混 哥 而 言 B、D 为 正解 机 率 为 ?9 
К |) 
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AF 3&3 (Conditional Probability) 


` 更 精准 的 来 说 ， 人 条件 机 率 的 表示 法 2 
Р(Х | Y) i 


X : 所 关心 之 事件 
У 人 条件 (观察 到 的 ,已 发 生 的 事件 ) 


前 例 : P(B AERE | "mE ) 
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` 
.a 
CV LOS 








IRRE EAR? 


° P(B 为 正解 | ЖЕН) =? £ 
ИЕ › ЕЕК Ж K kno 亲本 空间 为 : 


$ = {A, В, С, р) 


— ЖЖ c ML ERAN E la] % 29 : 








АЖ ERE 2 


MEX P ZARFI d > 35 нр іХ 


То Í W J A BE, ° X X AER RA p 
的 outcome (UN ЕЖА: То 








ыр: эшо ARX "Р ED 
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Ak PM Е 5. ? 


` 至 於 卷 舌 漏 曲 之 人 条件 事件 发 生 和 后 ， 4 
Fer 5 АКЕ) RIS AS IR 8 E "E 
一 不 管 卷 短 漏 曲 发 生 否 ， BAER] ££ '!DAZEASE, 机 率 比 例 应 该 一 样 ， 故 : 
P(B 1EB# | ЕН) : Р( D Z31ERE | ЕН) = P(B 握 正 解 ) : P( D ЕЁ) 
一 卷 矫 漏 曲 后 只 有 可 能 出 现 B 为 正解 | 或 D 为 正解 |， 故 : 
S' = (B, D), P(B 为 正解 | ЕН) + PCD RIER | #@ ES R BH) = 1 
一 根据 上 述 二 式 我 们 得 到 











Р( В 为 正解 ) _ РВ) 





л | XtkEGE 一 
Е = РЕБЕ) + PO D AER PERRE) 
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AR TE БЛ ЯЛ? 


` 延伸 : Ж en е 包含 数 个 实验 结果 : 


= 104,05, ... On} 
P (oi) _ |P(oj) 
Р(о1) + P(02) +-+ P(o,) |P(Y) 





Р(о{|Ү) = 


= J$ & 1+ X = {01,02,91,92}， 已 知人 条 件 事件 Y = {01, 02, 03} 
ЖЕ, Й] 
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ЕР EAR? 


° 终极 延伸 : 若 已 知 革 休 件 事件 了 发 生 了 ， ў 
Я] ЕН FA X o0 SpA 其 条 件 机 率 和 如 下 


= 





P(X n Y) 


Suppose, 1], 
given that" 


= "condition оп, 
"Assuming, ` 
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概述 与 范例 


` Ех: 小 美 同时 与 小 明 、 小 村、 小 园 暗 通 款 曲 < 
- Q: 小 革 赢 得 小 美芳 心机 率 为 ? 
1 





3 


一 Q: £t B» 3 24545 2 Z £ ° Z KA : HAAPT IMEZ ° 
Ер. B] £ ` НА УҺ > ЖЕ Gm AL ож, ЖЯ Же, 
ВЯ › P] ° BH КЛ C ЖЕ 


Пт] 3E Rs 
请 问 在 美 巴 明 发 生 和 后 小 华 赢得 小 美芳 心机 率 为 ? 


+ 


+ 


О 
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ARTE ARE 2 ВЕ A 
”对 任何 事件 中 及 任何 条件 事 件 了 ， 我 们 有 : P 


_ м. _ Р(ХПУ)>0 
ER 1: РОУ) = >, 





> 0 (if P(Y)-0, then P(XY)-0 ) 


Р(УПУ) _ PY) _ 
PY) PY _ 





一 ВЯ 2 : РТТ) = 


Р(АПУ) 4 Р(ВПУ) 
Р(У) Р(У) 


— E283: A,B Z/f 5 Р(АОВ|Ү) = 








= P(A|Y) + P(B|Y) 
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Total Probability 定理 


。 若 Ci Cz, .... Cn 3 JE B C,U C;U ...U C, = S 


则 对 任意 事件 4， 我 们 有 : 
P(A) = P(A | C4) Р(С,) + P(A | C2) Р(С›) + --- + P(A | Cn) P(C,) 


f. C; Сз C, 
A 





aa AA : У] ЕЕ => P(A) = У", P(A n С) 





= Xi-1P(A]| Ci) Р(С;) 
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Total Probability 定理 


* Ex: FJ £ vs. 可 党 店员 :店员 对 阿 宅 笑 否 ， 
Ља АА 


N _ Тр EN — Тр 

C, Au P Cni) m 4.’ P(B )= 4? 

A 1 A 2 A za 3 

P(& | 满 ) = 1,Р(3 | 8) = 2,P( 笑 | №) = 3 
А P(3&) =? 


% 
—/ 
| 








6 9 


24 24 24 
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A Kx (Вауеѕ’ Rule) 


。 M C4, С», ... C4 A Jf B. C1U CU ... Ü G, = S A 
则 对 任意 事件 4 ， 我 们 有 : 





P(A |C;) Р(С,) 


РО А = Pa C FC) + P | C) РС) + + PAG Р(С„) 


| 
P(C;nA) Р(А |С) ` P(C;) 
P(A) i-1P(A|C;) : Р(С;) 
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A Kx (Вауеѕ’ Rule) 


| ^^. РО П) 
inl UE 
4 2%) PW) 
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ona 


进击 的 钞票 


4 





wo | = 
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[кк | 换个 换 ? SE A eif ? 
HE AE ? 你 确定 ? PRIR! 
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Ж Bp №] ER 
AR F SE 8 Xx ? 





_ Р(ХПУ) 
。 Р(Х | Y) = "PY 
RH KE X? 





£, 





п ACEdA AES RA 


mt: weibo.com/yehbo RH €: facebook.com/prof.yeh 
冲洗 格 : pcyeh.blog.ntu.edu.tw 
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本 过 主题 概述 


3-1: 机 众 的 独立 性 
· 3-2: E AR RIR 3 
° 3-3: ECCE LE 








qe 
An. ЧУ Prof. Yeh, Pin ng-Che ng (Ben ee 2 
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3-1: EHTI 121% 
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机 率 的 独立 性 (Independence) 


"常见 定义 : ЗНА - B 2 yt £ W 
满足 





P(ANB) = P(A) - P(B) 


则 A、B 十 事件 称 为 机 率 上 的 独立 事件 。 
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ional Taiwan University 


Mmm.… 到 底 什么 叫 独 立 呢 7 
К MS ЖААК... — 
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另 一 个 更 好 的 定义 


"常见 定义 : ЗНА - В2 2 6 
满足 





P(A | В) = P(A) =2 - pu 


Р(В) 


© P(A n B) = P(A) - P(B) 





则 A、B 十 事件 称 为 机 率 上 的 独立 事件 。 
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26, 


* C Aa XA # 15 рии, №, 
作业 表现 相互 独立 。 若 $ ТЕ Ж ЖЛЕ Ж 
202 RMETATRS AO 
[o] v FHE ЖОР) EAE 2 28 2 2 ? 


0.2 x 0.3 = 0.06 


‚ Ping-Cheng (Benson) ŻA PX / 
| | Taiwan University 











2019] : КА пуй ЗЕ ! | 
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26.47] : ТАН gif 352 | 1 





черти тие METRE 
нурро руи 
KETA’ ЛАЗ, A F Жо ° 
FL В PTAA E РЕНА E ЖЕ ЖЖ 


= 0.3 Р=1-0.2 = 0.8 


0.3 x 0.8 = 0.24 





ар] : 古 锥 姊 vS. 水 源 阿 伯 


т F 





°  ” 某 古 锥 姊 有 时 会 在 活 大 停车 不 当 。 npr 
: 「 啊 ， 那 是 我 的 车 ! | 巧 笑 倩 4 | 
H ELE 


488 ° — ее Ë J | 
以 4 代表 古 锥 姊 即时 超 回 求情 之 事件 ，B 代表 阿 昔 a REER 


ВАТА: 
тее 能 求情 且 车 放行 ) = 0.05 


P( 古 锥 姊 未 能 求情 且 车 未 放行 ] 0.85 
P( 古 锥 姊 及 时 求情 且 车 未 放行 ) = 0.01 





ЕН: 「 你 不 公平 | 1 1 zi: TET x Р(Е@]$ 
1: ЖЖ, ИЕН | ИН 9 5 A 32 P Jt — 8 F] 5 Я? 
{ 古 锥 姊 求情 } = { 古 锥 姊 求情 且 车 未 放行 } U {十 锥 姊 求情 Н 车 放行 } 

Р(Т КІЯ) = 0.01 + 0.09 = 0.1 _,p( 十 锥 姊 求情 ) x P( 车 放行 ) = 0.1 x 0.2 = 0.02 = 0.09 不 独立 ! 


用 自 曾 述 一 般 而 言 : P( 车 放行 ) = 0. 
P( 划 放行 | 古 锥 寻求 情 ) = CE eu). 00.09 
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多 事件 之 独立 


° 若 事 件 41,42,...,n 满 足下 列 人 条 件 ， 则 称 此 
n 事件 独立 (n> 2) : 
6 РЕЖ m 事件 Ai,Ai,,.…,Ai 均 满足 
Р(А ПА;, П... ПА; ) = Р(А; )Р(А;,) = P(A), т = 2,3, ...,n. 
иле ан m ЬН 





小 -< ~ 
Ех: n = 5, A1, A,, ..., Ас 


m = 2: P(A,0A5) = P(A4)P(A2)? Р(А; ПАз) = Р(А+)Р(А»)?... 


[.) + (7) е. 


m = 5: Р(А, ПАПА: A,nAs) = Р(А+)Р(А»)Р(Аз)Р(А„)Р(А»)? 
全 都 相等 二 此 五 事件 独立 有 任 一 个 相等 = 此 五 事件 个 的 立 
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Ж Ph Te] ЙА 


° 3-1: ЖЕ 8508] xr PE 
一 哪 雨 种 定义 ? 
一 如 何 判断 事件 之 问 是 否 机 率 上 相互 独立 ? 
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3-2: | НА Е. 
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ri» тү 


营 碰 到 很 复杂 的 机 率 问 题 时 .…. 





° HARE ны A 


"这 实验 二 分 解 成 数 个 子 实 TE 
"各 可 以 ， ия 图 解法 | 


бир 
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в] : 兄弟 情 


° 明 、 革 兄弟 情 篇 。 故 决定 一 人 放 永 追求 小 美 以 免 伤 情 
БН ° Я PAA ЖК ` — ЖЖ ° Я Т: 
ЕЕ £ , ЖИ ФА; НХ], ЖА 
中 黑 球 为止 。 抽 中 黑 者 退出 追求 。 | 
° UC A235 Юм РОК А 0.5 ^ EZ BH IK 3k IK 3R Z }%Ж 2 0.4 ^. FX rp PRAE 
# 2 0.6 = ФН — ЛД. 2 4 Ж 2 0.7, BGRRRI 25 0.3 9 
° F] 34% АЗЕ H :É Rk 28 2 2 ? 
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P( 明 退出 ) = 0.5.0.4 二 0.5 0.4 0.7 1 
十 0.5.0.6. 一 十 0.5.0.7. 一 .0.4. 一 
———— 了 2 一 


2 1 
+0.5.0.7.-.0.6+0.5.0.3.-:1 
3 一 






о 43535 


0.7 ЕН T+ 明 抽 一 球 
一 Год“ 
меб ы 
0.6 


ВВ 
2/3 


"REN ВЕН — EK 


= -- 1 > 
Prof. Yeh, Ping-Cheng (Benson) EPS FX — =: 日 、 日 明 抽 一 球 , HB : 黑 16 


Dept. of EE，National Taiwan University 1/3 


1/3— =: m | 1⁄2, p:a -L| шиш—ы mnm 





ВАН УХ, =: H ` Ж 





£ 8р №] Ж 


| 3-2: Б) ЖА ЕЛА Е 
一 通用 哪 类 问题 ? 





Prof. Yeh, Ping-Cheng (Benson) 095 17 
Dept. of EE, National Taiwan University 








3-3: EX EX PL TER ли 
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身 为 一 个 热爱 机 率 的 青年 ， 喜 肉 数 数 
也 是 非常 合理 的 | 
° 古典 机 率 第 假设 每 个 实验 结果 


(outcome) а ^E 3& 3 28 [Р] 
一 Ех: е ҒА е ^ SR EL ` эге ж 286) › 7 — 








° 故 计 算 茶 事件 机 率 之 问题 ， 等 同 於 计 鼻 此 事件 包 
少 实验 结果 (outcome)。 故 计算 机 率 等 价 於 数 数 i 是 í 


19 
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数 数 基 本 原则 


(Fundamental Principle of Counting) 
。 若 某 种 实验 有 刀 种 不 同 结果 ， 而 另 一 种 Z. № 
实验 有 т ЖЕ] & £ ° МЕ Я Se 1$ Я nm 种 





不 同 结果 。 
— Ex: 下 午 茶 有 5 征 甜 点 的 选择 10 种 饮料 的 选择 。 
共有 多 少 种 下 午 茶 组 合 ? 


Sx10=50 
п т nm 


< / 
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数 数 前 的 重要 判断 


”所 有 的 物件 不 否 可 区 分 ? 
(Distinguishable?) 
отит 4 ? 
(With/Without Replacement?) 
от, ROGERII БА Ж? 
(Order matters or not?) 








. Yeh, Ping-Cheng (Benson) З 5 21 
ional Taiwan University 






排列 (Permutation) 


° Ех: ^ ЖЗ ж H iude "小 美 第 тА E 


三 兄弟 找 人 接送 。 
结果 ? 


一 可 区 分 分 7 Yes 


- 有 放 回 分 ? 
- MEŽA 


22 
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排列 (Permutation) 
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ERER 

(Choose wlth краш 

° Ex: O AERA R RRA ° УЖ В 31 E) № 
ФВ REGE ° а: М МАХ, 


问 有 多 少 种 结果 ? 
一 可 区 分 分 2 | Yes 
一 有 放 回 分 ? Yes 


一 ЙЛ ЖЖ? 





N Н 
3 x 3 =9 


24 
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重 柳 选取 
(Choose wlth че 
Пи, ЖФ | 
Ж. АЖ Е] ° ЖЛЕ +. 
i5 ? 
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组 合 (Combination) 


° Ех: 小 美 爱 玩 跳棋 。 小 美 常 自明 革 园 三 兄弟 
找 雨 人 下 棋 。 问 有 多 分 征 对 战 组 合 ? 

- TEDA? 

- ds? 

- 顺序 差 晴 分 ? 





哈 作 : З choose 2 





Prof. Yeh, Ping-Cheng (Benson) EPS FX 26 
Dept. of EE, National Taiwan University 


组 合 (Combination) 


‚Жап Ё РЕН К 
共有 多 少 种 结果 2 


БАНИ : #1 #2 #3 k 
Ax (mn-1) 1) X (1-2 2)x- „к в (k — 1))/k! 
wb LE 


on xn-1 xn-2x:-x (n-(k-1) _ n! 
i k! ~ n — КК! 





X (1): : 二 项 式 像 数 (binomial coeff — 
来 自 二 项 式 定 理 (x+ y)" = Es у" 
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组 合 (Combination) 





° Ex: ЖА 551218 85% 8 o 
F] 8 2 48 ЖЯ Н 2-°? 


12! 
== = 792 种 组 合 





НЕЕ... 
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多 项 组 合 (Multinomial) 


° Ex: 9? S OUI 8838 A SERE SEE SC ° Ж EIE SCR A ТЧ PR 
— КАЖ 





一 ДЕ 
一 在 五 楼 ... 


- 45! 我 在 这 | 
‚ою: 费 要 兄 发 (19 次 ， 一 楼 推 文 共有 多 少 种 组 合 ? 


4X 4X 4X 4X 4X 4X 4X 4X x 4 = [410 
10 
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多 项 组 合 (Multinomial) 


` SAMER’ PRENE PE-KA RAR 
Хо du gy UAR m" fé €. S eS Ж "其 中 在 这 m" 5% n 
实验 结果 中 ， 第 ү 第 2 48 3 TEE FAES H... HE # 
пакене ， 这 梯 的 实验 结果 共有 多 少 种 ? 
маа = (a) m C n NS 
UN т; ML 


—— r 





n! n 54! næm- n! . mx! 


nj п! (ац)! п! (п ти)! n! (n — Mag — пз) nm 
X (ху + X2 T: + Xm)" 
< multinomial coef ficient x 
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Kaie MARELE? 





о 若 一 事件 包 合 数 个 实验 结果 _ M 
(outcome) › 8 5/8 25 "" AREE 8 S 2 — 
一 先 计 算 任 一 个 实验 结果 SAGE 
-再 计算 该 事件 共 包含 多 少 个 实验 结果 
一 两 者 相 来 便 得 到 该 事件 的 机 率 | 
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zl 


26] : E Ж ж, 


。 рїї X О ЖК ЖЕ В] ° 
型 驴 之 出 现 机 率 为 : 
— РОГЖЕЮЕЖЕЖЛЕХ В, ) = 0.4 
— P(「 见 此 唉 滴 必 叫 | ) = 0.2 
一 Р( 在 五 楼 ... | )= 0.1 
- > bod 我 在 这 1 )=0.3 
会 在 一 —— к Гж... ，2 = Г... 
125 3... | 。 这 样 的 机 率 为 ? 


РШ Я Я А = 0.4 x 0.4 x 0.2 x 0.2 x 0.1 x 0.3 
0.4-0.,4-0.2-0.2-0.1- 0.3 =(0.000192 


ERRAT” Я % >L — E Ë > Z F] 
















(2 你 (2 8) “ы TA |0.000192]-0.0346 
32 
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Ж Ph Te] BË 


° 3-3: КЖ 
РУАН ? 
一 为 何 数 数 可 以 算 机 率 ? 
一 如 何 区 分 不 同型 驴 的 数 数 ? 
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п ACEdA AES RA 


mt: weibo.com/yehbo RH €: facebook.com/prof.yeh 
冲洗 格 : pcyeh.blog.ntu.edu.tw 
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本 调 主 题 概述 


4-1: 随机 变数 

° 4-2: 系 积 分 布 函数 CDF 
° 4-3: Ж ва в PMF 
° 4-4: ВЕЛ S 2) I 
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25 2x (RANDOM VARIABLE) 


zE Eus 
f.v. 


P 
E 
bi 

DA 
HE 
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A E XUI : 


.° ЕЯ Х УЖЕ] ° ЖЕ, Я Эс 
不 同型 驴 之 出 现 机 率 为 : 
— P(「 你 妈 知 道 你 在 发 文 文 吗 | ) = 0.4 
— РОГ, ) = 0.2 
一 Р( | 在 五 楼 ... | ) = 0.1 
一 P( 3! Ай!) = 0.3 

. P( 35! REZ] )— 1— Р( "ipi л) PC RE 
ЩЕ ) — Р( | 在 五 楼 ... | ) = 0.3 

ЯНИЕ? 
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考虑 费 雯 兄 的 例子 : 


° ЖА: НИККО ° Rd P % НХ, 
我 们 会 定义 X 为 不 同 值 : 
– ГАЕК, :Х=0 
- “ 见 此 唉 滴 必 史上 :Х=1 
— 在 五 楼 .…… | :Х=2 
— БВА у :X=3 
° 根据 统计 : 
- Р(Х=0)=0.4: Р(Х = 1) = 0.2; P(X = 2) = 0.1; Р(Х = 3) = 0.3 
° Р(Х=3З)=1-Р(Х =0) -Р(Х = 1) – Р(Х = 2) 
° 跟前 面 比 起 来 ， 你 党 得 如 何 呢 ? 
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随机 变数 

(Random Variable, К.У.) 

° 这 是 一 个 用 来 把 实验 结果 
(outcome) 数字 化 的 表示 方式 

。 目 的 是 可 以 让 机 率 的 推 过 更 数学 、 更 简明 

3j dg 4^] РЈ X Lx PTS 89 RS SE XX 

Е НИХ ОЧА 
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RECHA H | 


` RAR ka ЖИЛЕ? RADKA ?| 函数 
一 ' Rk Á ҮЛЕК Жочу :Х=0 
> X( ' f 3559038 F 4E 4E REUS | )-0 
一 ГА, :X-1 
o Х( Яш) =1 | 随机 变数 X 其 实 是 一 种 函数 ， BR X 吃 一 
一 在 五 楼 ... | :Х=2 个 outcome ， 就 吐出 一 个 对 应 的 数字 。 
>Х( | 在 五 楼 ... | T= 数学 上 的 表 不 法 : 
– FT! Айа! :X=3 
>X( 51 Аж! 1)=3 





X: 5 > ЛХ 
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随机 变数 的 种 类 


。 离散 随机 变数 (Discrete R. V.) 
— Ex € VS. 店员 : ХХ) = 0, X(FX)=1 
—>X=0X=1 
— Ех: ŽŽ% ŠA: : XX( 明 ) =0,Х(#) = 1, X(]) = 2 
25X-0,X-1,X-2 
— Ех: 小 明 告 白 多 少 次 才 成 功 : X(05)20, X( 12) = 1, X(24) = 2,... 
>Хх=0хХ=1Х=2.... 


BERI R.V. 的 值 是 有 限 人 向 , 或 是 ЧО] НУ т Е 


° 38 4&8 58 и (Continuous R. V.) 
一 Xii: X 可 以 是 0 到 1 有 问 内 的 任意 数字 
连续 R.V. BJ fB ze 3 RES Ze dal - тА uj # RE g E 
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fp жул] е]? йр т] е]? 


”可 数 的 : 一 个 集合 如 果 是 ”可 数 的 | Ж | 
这 代表 它 包 含 的 东西 是 可 以 一 个 个 被 数 的 。 不 管 
用 什 和 友 方 法 数 它 里 面 的 东西 ， 它 里 面 的 任何 一 梯 
东西 ， 总 是 会 被 数 到 的 | 








神 马 叫 可 数 ! 和 神 马 叫 不 可 数 2 


"不 可 数 的 : 一 个 集合 若是 “不 可 数 的 Ж 
这 代表 它 包含 的 东西 是 无 法 可 以 一 个 个 被 数 的 。 
不 管用 什 和 广 方 法 数 它 里 面 的 东西 ， 它 里 面 一 定 有 
一 榜 东 西 是 你 没 数 到 的 | 
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神 马 叫 可 数 ! 和 神 马 叫 不 可 数 T 


ERA : 0 到 1 之 间 的 所 有 数字 的 集合 是 个 可 数 的 ! 
小 子 : ЕЛ. 我 超 有 怖 心 ， 绝对 可 以 把 过 些 数字 一 个 个 全 部 数 出 来 


内 种 : 不 可 能 的 。 假 设 你 真有 办法 数 这 集合 中 所 有 的 数字 。 你 就 按照 数 的 顺序 ， 把 数字 一 E673 КЖ! 
小 子 : Е ! (Gs Es АИА! 


0.1215281 ... 
0.3[glboo ... 





0. 12[3]75 ... 
AAKER : 无 知 小 子 ， 你 失 算 啦 ! 有 一 个 数字 是 你 绝对 没 数 到 的 | 
小 子 : 我 不 信 ! 


AA : 小 子 ' STE! REMAR 0.716... (第 N 位 数字 定 角 “9 一 第 N 个 被 数 数字 的 第 N т 





FER! 2562 Sa El СЕМ, ТАКА ЕВЕ ° ^^: BSEDH TARKA AE 
江 言 日 后 必 贸 用 心 回 学 。 内 绅 括 撕 帝 吟 …. 你 去 Coursera 16 ( 和 后 话 个 表 ) 
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Ji ie 38 £ Bu RR Ager] | 





№2 4.20.7 № 2 
e 「 正 整数 的 集合 | BR 上 
相 比 ， 哪个 集合 里 面 东 西 比较 多 ，? 


* 「 长 度 为 一 的 线段 上 的 点 | SR | ER A—IJIEZTE ESSE, ° 
这 十 个 集合 ， 哪 一 个 点 的 数量 比较 多 2 72] 


都 一 标 多 ! ARA uj ДЕ] — 88 — $3 18 8373 A ° 
Se ff RD ! ABE ERE IR ВЕ Ш са аА — = 1710 ! 


1, Т 
偶 整 数 | 的 集合 m 


尽 谁 襄 学 数学 疫 用 的 ? 
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随机 变数 的 函数 ? 


” 阿 宅 若 看 到 店员 微笑 ， 就 会 点 $200 ГА 
веж ° 如 果 店 В ^ ж. А $15 的 饮料 。 
$3 F] I] 5 89 Я Pr £ 28 W x< Ба 1k Y? 


店员 表情 可 以 由 随机 变数 X 代表 : AMR) = 0, ХК) = 1 
W = X КУЧЕ : W(X( 微 笑 )) = 200, W(X( 不 笑 )) = 15 





所 以 W НЕХ outcome 吐 数字 上 因此 W 也 是 一 个 随机 变数 | 
记 住 :| 随机 变数 的 妆 数 ， 也 是 一 个 随机 变数 嘱 ! 





2. Prof. Yeh, Pin ані Rei ив 13 
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Ж Bp Te] ЙА 


А Bay? 
ИЖ ? 
НАЯ? 
° ST 3£ vs. 不 可 数 ? 
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4-2: REN ffi Ej EX CDF 
(CUMULATIVE DISTRIBUTION FUNCTION) 


第 四 过 





. Yeh, Ping-Cheng (Benson) З 5 15 
ional Taiwan University 


啥 是 累积 分 体 函 数 CDF? 


“ 对 任 一 个 随机 变数 X ， 我 们 定义 上 = Ñ 
其 CDF 为 函数 = 
о = РЕ 


随机 变数 







> 
Ө 





Ех: wi 


Ех(0.5) = 
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CDF 有 什么 用 ? 


"最 有 用 的 用 途 : Р(х) 
SOR X EE RA endi 


; і P(3 < X < 5) 
P( - ;) = P(X X < 5) 


== ) - P(—% € X < 3) 


Р( .) = P(X < 5) — P(X < 3) 
те = Ех(5) — Fx(3) 17 


rof. Yeh, Ping-Cheng (Ве 
p EE, Nat 








CDF AFEA? 


° 最 有 用 的 用 途 : 
sp A X OE X $6] P 832 E 
P( Сб P(a|«|X x b) Piacxcb ) 
p == ‚у ыйы 0 
—  —À 


p(aE x < b) 
s a P( = ) =|Ех(Ь) — Ех(а) + P(X = 


Prof. Yeh, Pin Па Вав аА 
Dept. of EE，Nat 








离散 随机 变数 的 CDF REIR? 








° Ex: X 为 最 子 的 点 数 ， 故 P(X = 1) — P(3 < X < 5) 
= Р(Х =2) = P(X = 3) = P(X = 4) `= 
—6- 
° СРЕ: P = РО <= | 6 = P(3 < X < 5) 
; = = PG <х <57) 
QO r— ЈЕ = Рх(5) - Fx(3) = Fx(5) — Р(Х = 5) — Fx(3) =š 
6 <š - P(3<X<5)=? “ Р 
= 6 


03 (T) £ ©) >63 284 5 6 ($* 
Р(а < X < 9)]- [Fx -Fr 
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- P(3 < X < 5) =? 





连续 随机 变数 的 СОЕ 长 怎样 ? 


` Ex: X 为 幸运 之 输 所 停 下 的 数字 Х € [0,1) 
— CDF: Fx(x) = Р(Х < x) 











і 
Fy(—0.1) = Р(Х < —0.1) = 0 Ех(х) | 
——————— 

| 
Ех(0.1) = PO€ X 0.1) = 0.1 o.6 ! 
Ех(0.5) = P(0 < X < 0.5) = 0.5 00.1 05 1 х 





_O-| 
— P(0.3 < Х(©)о. 5) 
= Fx (0.5) — Fx(0.3) = 0.5 — 0.3 = 0.2 
Fx(1.7)=P(O<X<17)=1  - P(03«X€)0.5)-(e3«x £os") 
an = Ех (0.57) — Ех(0.3) = 0.5 — 0.3 = 0.2 


Fy(1) = Р(0<Х<1)=1 
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CDF Я 


”离散 随机 变数 之 СРЕ : 


Fy(x^) = Ех(х) 





Fy(x^) = Ех(х) — P(X = x) ° ЗЕЯ 


| — Fy(—%) = Р(Х < –оо) = 
° 3$ 68 外 随机 变数 之 CDF : — Еу(со) = Р(Х < со) = 1 


Fx(x ) = Fx(x) = Ех(х”) -0<Р,(х) < 1 
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Ж Bp Te] ЙА 


e СОЕ 的 定义 ? 

— Fx(x) = Р(Х < x) 
° CDF 83 Я? 

— P(a < X < b) = Fy(b) — Ех(а) 
° СОЕ E 8? 








ww 
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4-3: Е а Eu EX PMF 
(PROBABILITY MASS FUNCTION) 


第 四 过 
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是 机 率 质 量 函 数 PMF ? 





Á ° Кү" РМЕ е 
px(x) = Р(Х = x) 


Ex: X ЗАЗ Отн 


1 
px(3) = P(X = 3) 3) = — 





PMF 3R CDF є ИА ? 





F,(2.5) = Р(Х < 2.5) 


X {ТЇШ x : 


|x] 


Fx(X) = ) px 


TL— — со 





< j 
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PMF 3R CDF є ИА ? 


° Ех: PMF Ə CDF 





2, 
/7 
[x] 


Ех(х) = > px(n) : 


n=— осо 






“Б 2. 4 5 





< J 
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PMF 3R CDF є ИА ? 





° Ех: СОЕ > PMF 


Px(x) - Fx(x*) — Fx(x ): 
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PDF) 28184 £ FE E 
(将 总 和 为 工 的 机 率 分 休 在 点 上 之 故 ) 





ч in. 
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ЖП Te] RA 
e PMFE&5 x & ? 
° PMF 3& CDF 4 Bj 2 
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° ЕН: 非 正 面 ， 即 反面 ， 正 面 机 率 为 0.5 
° 阿 宅 告白 : 非 成 功 ， 即 失败 ， 成 功 机 率 为 0.7 
° 出 门 天 气 : 非 晴 天 ， 即 雨天 ， 上 晴天 机 率 为 0.6 











€ =, | 
№ дл. Prof. Yeh, Ping-Cheng (Benson) МЕ Е 
al Taiwa 


Dept. of ЕЕ, Nation п University 


Bernoulli 34% £ Z № 


CDF: 





. PMF: речи: 
1 =, ХЖ: 
|х| 
Ех(х) = ) рх(п) 


nem 0.6 
1 
[0.4 


0 1 


0 
Ех(х) = 0. 4 , 0 < x < 1, 
1 ,X 2 1. 


0.6 х= 1, 
= +04 "X=, 
О „otherwise. 
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Bernoulli 34% £ Z № 





。 PMF: оО 。 CDF: 
1 ЖЕ № › X ERA 


p , x = 1, 
—p ,X = 0, 
0 ‚ otherwise. 
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BUER— TF... 


° PISA S XE 10 人 › X 42 A, 
7] J& 6 25 0.6 › 10 = wy any. 
° 一 过 5 KT £S ЕЯ, Е А 0.9 
5 天 中 有 3 X S 1ЕЖ BERT gk # 2 ? 
° ШЯЗЖА ЛАЗ Z ' 2 k= 38 IST 48 46, 22 3 Ж 
为 0.8， 那 这 3 次 被 拖 2 次 之 机 率 为 ? 
作 п ла 1148 ER ^ 在意 п аш 








更 某 结果 RZE Binomial 247% 
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Binomial Ж # Z n 





”PMEF: E RRRA F 为 (0.6) * CDF: 
作 10 KER’ X us k t 


X —BIN(10, 0.6) 
Lx] 


px(8) Ех(х) = > px(m) 
# 成 功 = 8 а 


Р(Х = 8) НЕ = 10-8 


Lx | 


т=- oo 
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Binomial 4% * Z £h 





* PMF: 若 实 验 成 功 机 率 为 Dp 。 CDF: 
Е n 次 实验 ， 头 表 成 功 次 数 


X —BIN (n, p) 


px (o Ех(х) = > px(m) 
# 成 功 = x и 
P(X = x) / + Щ =n — x 


| 
Qf pe^ наву 
— 0 РМС 
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BUER— TF... 


` АМ: 1 到 6 各 点 数 出 现 机 会 均等 
” 混 哥 考试 : 作答 A, B,C, D 机 会 均等 





1 RER > n PEAS . 





意 革 结果 发生 否 Uniform 机 率 分 作 
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Uniform 4% £ Z т 


。 PMF: ЖХ ŽI 3,4,...,7 © CDF: 
8] JR 3 3⁄2) SE 





Ех(х) = ) рх(п) 


TL = — со 


0 , x < 3, 


Ix| —3+1 
5 
1 


‚3 <х<7,. 


, X > 7. 


1 1 
— = —, = 3,4, ...,7, 
рх(х) =7—3+1 5 * 
0, otherwise. 


awa. 
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Uniform 4% £ Z т 


* PMF: ЖХ $ 3 a,a + 1..,b + CDF: 
的 机 率 均 等 


PX) : Х-ИМТЕ(а, b) 
1 1 = 1 
ПЕТ СЕТЕ Вет 


а а+1 _ р 





Ех(х) = ) рх(п) 


n= — со 


0 , x < a, 


Ix| -а+1 


р-а+1 
1 ‚х 2 р. 


, q < x < b, 


1 
B o qw Ф = ) 1, А: 
рх(х) = {Б a} 1i 5 9927 
0, otherwise. 
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ЕЛА MR STIR ? 


‚ 很 多 事物 背后 机 率 模型 是 未 知 的 Ды 
* 对 事物 的 运作 方式 、 本 质 清楚 后 ， 若 跟 某 机 
率 分 伟 的 本 质 相 同 或 是 接近 ， 我 们 便 可 探 用 
该 机 率 分 信 来 近似 、 模 所 该 事物 的 运作 
”在 这 近似 、 模 所 的 机 率 模型 上 ， 便 可 以 开始 
估算 各 式 各 样 事件 的 机 素 





¿ " 
18 N 





ЖИ В] ER 

° о? 

° Bernoulli 4% # 47 f ? 
° Binomial & 35 77 ? 
° Uniform 1% 4€ 2 fg ? 
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п ACEdA AES RA 


mt: weibo.com/yehbo RH €: facebook.com/prof.yeh 
冲洗 格 : pcyeh.blog.ntu.edu.tw 
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本 调 主 题 概述 


° 5-1: ВЕ ЗАЛА AE A] П 
° 5-2: Ж Ж PE f 3X PDF 
° 5-3: КАТИТ 
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5-1: EE AX d EN ff П 
(DISCRETE PROBABILITY DISTRIBUTIONS) 


第 五 过 
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° 阿 宅 告白 : 成 功 机 认为 0.3， 不 成 功 普 不 体 。 轩 
问 到 第 5 次 才 告 白 成 功 之 机 率 ? 
` 陶文 革命 : 成 功 机 率 为 0.1， IRR 3 4k НЕ Ил 
成 功 之 机 率 9 
° ХК: ДНЯ ERA PORE XT H >< Ja +P т 
的 出 来 的 机 率 为 0.1。 他 在 10 = 4 jr B 22 B p @| 6) 28 Ж 2? 
实验 中 出 现 某 结果 机 率 已 知 ， 重要 操作 实验 至 该 结果 出 现 为 止 。 





在 意 某 结果 是 在 第 变 次 实验 才 和 下 次 出 现 了 > Geometric 机 率 分 作 
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Geometric 机 率 分 念 





КАК]: IMS ERRARE 19 | 
zB ep] +T 6 H 来 的 机 率 为 0.1。 ,他 在 第 10 次 
Z +T Н >< BJ + aad? 

败 败 败 败 败 败 败 败 败 成 


> 机 率 =0.9x0.9x0.9x0.9x0.9x0.9x0.9x0.9x0.9x0.1 


= 0.9? x 0.1 





Ж ЛЕ. ЕЕ ^ a S ЕЕ 





е d 
T Prof. Yeh, Pin шт ар Е 
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Geometric 机 率 分 念 





° zB Bep: Я Я EM ECESGRA 4 
АКР е] ° {тШ ЖА p ° 他 在 第 
EG Xd Н ARRA] o X MART. 


ЯХ ЯХ ЯХ ЯХ RE BY НЧ... RB px 
a 





< d 
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Geometric 4X т ARRIE |! 


° PME: žE RAJAZ 2 p ° Е 。 CDF: 
АЗ] эя) Zgab o dg f X Z = SA 





|x] 
Ех(х) = ) рх) 


TL— — oo 






|х| 
x > 1: уа — р)"!ір = р 


-— п=1 


1— (1-р) 
1 — (1-р) 





0 1 


x«1:0 






py(x) = undi. X= 1,2,3,.. 


0 Otherwise 
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BUER— TF... 


” ВМХ: 阿 宅 洲 约 店员 失败 机 率 为 0.9， Ш 
若 邀 约 失 败 达 4 次 ， 阿 宅 便 会 自尊 有 损 而 放 素 追 来 。 
宅 第 7 次 邀约 时 决定 放 对 追求 之 机 潜 T 

° ЗРЯ. 3536 EMI PRISE AR 5 KAII EMEA 71 4€ 
Боже ЖА 0.1 ° ЕЩЕ Я 9 И 
7] 7] 46 3 ЖЖ ? 


-EEF 
M 





f] ДЕ FT 
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Pascal 4% # Z № 


° Ae: 3F325 Я ЛЕВОЕ M ik 
7 АКАР 91] › +T 63 H kana :为 0.1。 成 功 5 次 便 功 
力 耗 僵 。 请 癌 他 在 第 9 次 上 时间 好 功力 耗 入 的 机 率 ? 
оја! 02 — : ВХ БХ ЯХ БХ ЯХ БХ БХ ВХ ВХ 


> 此 情况 机 率 = 0.9 х 0.1х 0.9 х 0.1х 0.9 х 0.1х 0.1х 0.9 х 0.1 
= 0.91 x 0. 1? 





刚好 第 9 次 才 成 功 第 5 次 的 情况 有 变种 ? (8) (1) = (8) 


4 





> AREZ = ain x 0.9*x 0. 15 
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Pascal 1% # Z № 


° AJ Ap: ЕЕ Р-Н АЯ 





$] » ITA ЖЖ р ° mush k 24855 463 ° 
№ ХЛ КАИ. X = x 的 机 率 ? 
оја! — : ВУ Bx ВУ Px BZ PX РХ НА... PX 

—— ——— 


> 此 情况 机 率 -& - р) «6» 


刚好 第 x 次 才 成 功 第 k 次 的 情况 有 变种 ? (T 1 


> 所 求 机 率 = (T7 ) ха-р = kx ph 


Pw 
bae. Prof. Yeh, Ping-Cheng (Benson) PS pk 10 
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Pascal 1% # Z № 


° PME: Z Ë джем р, зА + CDF: 
到 第 下 次 成 功 为 止 共 作 了 大 次 










Ех(х) = Р(Х < x) 
= P( 第 上 次 成 功 在 第 x АЈ) 
= 已 (在 x 次 实验 中 > k 次 成 功 ) 






(1—p) Кр“ ‚х= к,к+1,.. 





0 , otherwise 





G = P(Y > k), Y-BIN(x, p) 





А Pascal ХЕ Negative Binomial 
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— F... 


СЕТИ. Ж. 
$E dd GEH RON gps з ги G 60 ДЖ ЖЖ? 

° AZRE: Ç X. po ` XR ° ° 
E] 4 3c 4&| — + 2-48 [86 XX (100 ik) - 9 


T 





菏 结 来 出 现 之 平均 速率 (rate: 次 数 /时 间 ) СЯП ° JES AS ЕЕ 





时 间 长 度 和 后， 看 到 该 结果 出 现 大 次 之 机 率 ? > Poisson 27) 
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Poisson Ж # 4j- fn 


= 
° PMF: C AUR FAR Ae VR EZ Ek ВАН AKYN. 
À 次， 观察 时 间 为 了 时 间 单 位 。X 为 该 观察 时 间 
内 发 生 该 事 的 总 次 数 。 则 : 


(AT)* 


px(x) = Р(Х = х) =e .~ 


X! 


u 
МУАА — D — —И о Ñ—mñ 
> ‚Х-РОГ(и) > Рх(х) =e = 
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Poisson 1% # Ир 


• CDF: 
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Poisson Ж # 27 ff 


КОНЕ: 费 要 兄 po X ` +P ча 
EPE @ EZ ° E x 46/20) 88 t 
成 ХХ (100 %) 之 机 率 ? 


2 = 5 18/7 ^ ЕВЕ X 43 20 23 SPALETI D SX 
5 X -POI(AT) = POI(100) 






100 100 
AT??? _ go, 100 
100! 100! 


内 成 15 


g son) = 
Dept. of EE, National Taiwan University 


> py(100) = e АТ. 
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Г 
WT URRE ôT 的 极 小 段 


[jr qd 共有 ln = = 个 小 段 。 заза А 次 /分 ， 每 个 小 段 会 发生 的 机 率 | = 16; = 27.) 


故 了 时 间 内 发 生 的 次 数 X~BINGOup) = BIN =). 


п 











Г (x) = lim (1 `. , (n(n —1)--(n-x- 1)) (AT)* , ATV * 
-— X) = ИП 一 — — — —— — 
ET ME HEN = n 
1 пп-1 п-х+1 xfa MT _ ry *  Qry[, ат)" | ans -A 
i - lim X n n (АТ) a = (1 =) А [im (1 i n x! е 


1 = X ~POI(AT) 
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你 也 懂 Poisson ? && ` e$ 





Дня. SXIESTIGE 帮 
为 每 尺 见 方 三 入。 诸葛 孔明 於 船 上 置 放 草 人 
六 百 。 各 旱 人 正面 面积 为 六 尺 见 方 。 周 瑜 问 
e E U BJ v] f 49 RAE 2549] ? 
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Ж вр J] АЯ 
° Geometric 机 率 分 体 2 
e Pascal 1% £ 4j № ? 


° Poisson 4 £ Z f °? 
— Е Binomial 的 关 像 ? 
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第 五 过 
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人 家 有 ， 我 也 想 要 有 .… ^3 


` BEL OS ER HEU CR PMF 告诉 我 全 “БР, 
蒜 个 数字 发 生 的 机 举 

连 经 变数 的 机 率 分 休 常 有 不 均等 的 情况 发 生 ， 
Ех: 睡觉 的 时 间 长 度 

° 对 连续 的 随机 变数 ， 我 们 也 想 知 道 某 个 数字 
发 生 的 机 会 多 大 ， 可 以 用 PMF "5? 
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ië ¿8 R.V. 的 先天 有 问题 


° ЛЕА Х-[0,1), 





рх(0.7) =? 


[0, 1) ЕЕ Е, TRAD 
[0, 1) 中 有 没有 超过 109 个 数字 ? 9! => 10 хр<15р< 1056 
[0, 1) 中 有 没有 超过 109 个 数字 ? Я! => 10% хр<15р< 10-8 





€ =, | 
№ ^^. Prof. Yeh, Ping-Cheng (Benson) МЕ Е 
al Taiwa 


Dept. of ЕЕ, Nation п University 


A5 RTT.. 


ЕЖЕ PMF 注定 就 是 
疫 闪 法 在 一 起 ， 翡 尺 啊 | 

° 关键 於 每 个 数字 发 生 的 机 率 都 是 01 

° 还 是 很 想 知 道 在 某 个 数字 发 生 的 机 会 多 大 ° 
E А? 
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先 看 个 乱七八糟 的 例子 


”因为 拍 矶 ， 特 别 订 做 合金 里 剑 a 
*” 铜 、 人 金 打 造 ， 如 何 得 知 有 短 ас? 
Е , J Z S 2k PË S 2 Ж? 好 熟悉 | 
"不 看 质量 看 什么 ? 看 密度 | 
аш 


X X+ Ax = 
ТУУЛ, F 
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连续 的 东西 ， 关 键 是 密度 | 


` 实 创 有 密度 ， 机 率 也 可 有 窗 
` 对 随机 变数 时 而 言 ， 其 机 率 


| PSX < x + Ах) 
PDF: fx (х) 一 lim 


Ax 


‚ Fx(x + Ax) — Fy(x) 
A0 Ax 


= Fy(x) f. 


CDF Ех(х) > PDF fy(x) 
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PDF 31% 2ë hy ИА 


° RARR TREE AE 
PDF +2 4, = ЗЕ 16 45 E? 


P(a < X < b) = Fy(b) – Ех(а) 





PDF 


fx Gods - [^ родах f x(x) 


oo 










Їх(х)ах 





Prof. Yeh, Ping-Cheng (Benson) # 
Dept. of EE, National Taiwan University 


PDF 31% 2ë hy ИА 


Р(х < X < x+Ax) 
Ax 











f x(x) = Пт 

< x0 
。 当 Ax 
P(x < X < x + Ах) = }у(х)-Ах 


> 
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PDF 有 哪些 性 质 呢 ? 


° fx(x) = Ех (x) 

° Fy(x) = [ fx(u) du 

e P(a < X < b) = Г fx COdx 
° f кодах = 1 


awa > () MT Ca» be larer 
then | 


ng-Cheng (Be on Е . 
ional Taiw 








Ж Bp Te] ЙА 


i$ A КЕ A ЕЕ NEGET 
+H Ж ZEE # Е ах PDF ? 
PDF 3& CDF 的 关 像 ? 
PDF &5 # ? 
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-3 : IER SE; IRI 
(CONTINUOUS PROBABILITY DISTRIBUTION) 


第 了 五 这 
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Uniform 4% 5 


° PDF: ° CDF: 






fx) = 16а S DOS 


Y Í L 

Ех(х) = J ўх(и)аи 

0, otherwise 0. L 
X — a 

一 > а<х<Ь, 


b—a 
X -UNIF(a, b) 1, y > b. 
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Uniform 4% £ Z т 





° Ex: 20152 2: 8. k 788 — 9E ° » 
小 美 随意 出 发 到 公 冲 站 ， 小 美 须 等 候 公 囊 
> ЕЁ] № X 
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Exponential  * 2 tf 





° PDF: ° CDF: 
ú 2e 2x y > 0: — Пх> 0: 
Їх(х) = Ú otherwise. Ех(х) = | ўх(ш)аи 

_ б 
х (9 

I [Dean 150, 
0 - [е Г. 

-&l Ed (—Au) 

0 


ное ми 


- Ifx«0: Fy(x) = 0. 
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Exponential  * 24 


° Exponential ShA ЕЯ м 
(memoryless) > 5$ 4& 9 % model 有 rmr Я 
的 事情 
— Ех: 小 美 出 门 化 妆 所 需 之 时 间 
— Ех: ж = H LOL f 16 8 Е Fa] 





33 
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Erlang 1% £ 2 № 
* X-Erlang(n, 2) А 


1 п.п-–1 „—А4х > ñ: 
PDF: f у(х) = GD ке ее 
0, otherwise. 
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Erlang 4% 2 47 ff 





_ vmn-1 (Ax)" 一 4X 
. CDF: Fy(x) = 417 Zk=0 Ti 
0 





, x > 0; 


‚ otherwise. 
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Erlang 4% * Ж 


° Erlang(n, A) 第 被 用 来 model p AM v. 
[ИЕН ен 
需 上 时间 都 是 随机 的 
一 关卡 数 : n 


— 每 关卡 所 需 时 间 之 机 率 分 休 |Exponential() 
- Ex: ed 天 所 需 时 间 
- Ex: 写 完 五 科 作 业 所 需 时 间 
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36 


A Bi в] Я 
° Uniform 2% € 24 ? 
° Exponential 4% # 5 ? 
- 有 失 居 性 《以 和 后 会 证 明 ) 
° Erlang 4X 36 7 ff ? 
— $& Exponential 的 关 像 ? 
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£, 





п ACEdA AES RA 


mt: weibo.com/yehbo RH €: facebook.com/prof.yeh 
冲洗 格 : pcyeh.blog.ntu.edu.tw 
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РА $ A чи ЖГ 
AFARI Y 
TE LÍ TRES 





+ : 
> 
Tir 


积 不 出 来 时 






EE a 


本 调 主 题 概述 


° 6-1: 连续 机 率 分 体 TI 
° 6-2: ER I 
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6-1: 2E 48 4282877 т П 
(CONTINUOUS PROBABILITY DISTRIBUTIONS) 


“=e - 
7B cs 


baa. УЭ Prof. Yeh, Pin ng-Che ng (Ben на 
опа 


Dept. of ЕЕ, Nat 


y 


AX 


Normal 1% £ 4-4 (ЕЯ) 


° Ж RR 2 Hn В КЛЕ т H 3C 
一 Ex: Au NX m ` HŠ = 2 1 
ЛУЖИ УЖ во, 的 机 率 模 型 
— Ex: 100 A.vz 8 Bš Fa] 85) 28 2 
一 原因 : Жак) ° P jk R <£ PE | 


Ç 
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дл; 
Cre 


Normal 1% £ 4-4 (ЕЛИ) 


° РТ o ЯЕ ЛЕ Gaussian 4 
(高 斯 ) 4 E 2-4 ( 瞧 那 高 斯 的 威 能 啊 ! |) 
° Х~-Саиѕѕіап(џи, o), 


Ç 





(х-и)? 


1 
fx(x) = ALS 20^ 








也 常 有 人 用 于 ~N( 帮 Ga) 来 表示 
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y 


AX 


Normal 1% = Zr 4m (СО: 


° CDF 是 多 少 ? 
— 很 的 算 ， 积 分 根本 算 不 出 来 ! 
一 用 数值 积分 法 去 建 表 ? 很 的 啊 ， 因 为 不 同 的 0 就 会 造就 
出 不 同 的 % 8 2 40 PDF， 每 个 都 要 建 一 个 表 会 要 命 啊 1 
° БЛ? 
一 有 没有 办 法 找到 一 组 特别 1,60 ， 先 针对 这 组 的 CDF 建 表 ， 
然后 想 闪 法 把 别 的 常 驴 分 体 的 CDF 跟 这 组 CDF * Е ША ? 
一 若 能 牵扯 上 ， 再 利用 这 表 去 算出 别 的 第 态 分 体 的 CDF ? 
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E 2 ff ) 


Ç 








Standard Normal Distribution 
А б RS ЭП 


e Z-N(O, 1), 





fz(Z) = 
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Standard Normal Distribution 


标 Ё т RS HE A p 


* Z~N(0,1), 
72 


1 
fz(z) = Jam 


u2 
* CDF 表示 为 d(z) = 六 去 e 2 аи 
一 ЖЖНХ o^ Аи АУ TA 38 D H RER 
给 人 家 查 
一 网 路 上 或 是 工程 计算 机 上 常 能 找到 
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Standard Normal Distribution 


标准 党 


At 
已 
S 


分 体 


` 4| : F,(1.325) =? 





0.0 [0.5000 [0.5040 [0.5080 0.5120 0.5160 
0.2 [0.5793 0.5832 [0.5871 0.5910/0.5948 


0.05 


0.5199 
0.5596 


0.5987 


[0.06 | 
0.5239 
0.5636 
0.6026 


о 


0.07 
0.5279 


0.5675 


0.6064 


0.08 | 0.09 
0.5319/0.535 
0. 


a 
- 
A 
ol o 
© | м 
>| = 
A| o 
一 | w| © 





.6179|0.6217| .625 0.6293 0.6331 


0.6 
„50.6915 [0.6950 0.6985 0.701 90.7054 
.6 0.7257|0.7291 [0.7324 0.7357|0.7389 


ЭНН 


0.6368 
0.6736 
0.7088 
0.7422 


0.6406 


0.6772 


0.7123 
0.7454 


0.6443 


0.6808 


0.7157 
0.7486 


0.648 
0.6844 


Ф 
Oo 
~j 


.687 


E 


o 


~j 
о 
о 
о 
~j 
N 
N 
+ 


"IL 
OE 


o 
~j 
m 
~ 
о 
~j 
m 
+ 
Оо 





Ы 


[0.7881 [0.7910]0.7939 [0.7967 [0.7995 
0.8159 0.8186 0.8212 [0.8238 0.8264 
0.8413/0.8438 0.8461 [0.8485 0.8508 


0 0 5 
4 0.6554 0.6591 0.6628 | .6664 0.6700 
0 
E 


o 
со 
о 


о 
© 


5] 


0.7734 


0.8023 


0.8289 
0.8531 


0.7764 
0.8051 
0.8315 
0.8554 


0.7794 
0.8078 
0.8340 
0.8577 


9 
0.6103 
0 
3 


0.7823 
0.8106 
s 
Ces 


~ 
со 
сл 
N 


0 
0 
0 
0 


.813 


Е 


о 
со 
оз 
o 
m 
о 
со 
оз 
со 
© 


о 
со 
m 
© 
Оо 
о 
со 
о 
N 
— 





.1 [0.8643 [0.8665 0.8686 0.8708 0.8729 
.2 [0.8849 0.8869 p pu ра 
.3 0.9032 0.9049 0.9066 0.9099 

0.91920.9207 [0.9222 (0.9236 [0.9251 


mr 
+ 


0.8749 


0.8944 
0.9115 
0.9265 


0.8770 


0.8962 
0.9131 
0.9279 


0.8790 


0.8980 
0.9147 
0.9292 


0.8810 0.883 


0.8997 0.901 
0.91620 
0.9306 [0.931 9 


ИШ 





сл 








0.9332 [0.9345 [0.9357 0.9370 0.9382 





0.9394 





0.9406 





0.9418 


0.9429 0.9441 





0. 9066 + 0.9082 
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http://en.wikipedia.org/wiki/Standard normal table 


1.6 0.9452 0.9463 0.9474 0.9484 0.9495 0.9505 0.9515 [0.9525 0.9535 0.9545 
1.70.9554 0.9564 0.9573 0.9582 0.9591 0.9599 10.9608 0.9616 0.9625 0.9633 


1.80.9641 [0.9649 0.9656 0.9664 0.9671 0.9678 0.9686 [0.9693 [0.9699 0.9706 
1.9/0.9713/0.9719/0.9726 0.9732 0.9738 0.9744 0.9750 0.9756 0.9761 [0.9767 


2.0 [0.9772|0.9778[0.9783]0.9788 [0.9793]0.9798 |0.9803]0.9808 0.9812 [0.9817 
2.1 [0.9821 [0.9826]0.9830]0.9834|0.9838 0.9842 [0.9846 0.9850 [0.9854 0.9857 
2.2 |0.9861 [0.9864 0.9868 [0.9871 (0.9875 0.9878 0.9881 [0.9884 [0.9887 [0.9890 
2.30.9893 [0.9896]0.9898|0.9901 [0.9904 0.9906 [0.9909 [0.9911 [0.9913 0.9916. 
2.4/0.9918/0.9920 0.9922 0.9925 0.9927 [0.9929 0.9931 [0.9932|0.9934]0.9936 


(2.50.9938 0.9940 0.9941 0.9943 0.9945 [0.9946 [0.9948 


2 
0 9 
2.6 0.9953 0.9955 0.9956 [0.9957 .9959/0.9960/0.9961 0.9962 0.996 0.9964 
0 2 
9 
5 











o 





0 9 
2.7 0.9965 0.9966 [0.9967 [0.9968 [0.9969 0.997010.997110.997 
2.8/0.9974/0.9975 0.9976 [0.9977 0.9977 0.9978 0.9979 0.9979 0. 
2.90.9981 [0.9982 [0.9982 |0.9983|0.9984 0.9984 0.9985 10.998 0.9986 0.9986 




















2 








1.325 


Standard Normal Distribution 


ЛАЗЕ "бй RE f 
` ФД &i 4: |P(—2) -1- @(2) 
N 








$ г) + $) =| 
| i 
btw ved 


—7 07 
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t£ & шо 下 的 СОЕ? 


。 ж по 下 的 CDF ， 我 们 要 把 它 跟 NN(0,1) d E B 4 mm 
> CMA! S HER X^N( ot), m 


VE 
89: Ла) = 





202 





Jro. 
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Ех(х) = Р(Х < x) 


=Р(Х-и<х- и) 





任意 风 G 下 的 CDF? 


* Ex: 已 知 10 名 水 源 阿 伯 每 日 拖车 总 重量 总 和 





Ех(700) = Р(Х < 700) 


- p (2 sms) 


G 


700-500 _ 200 _ | 
100 100 | 
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Ж вр В] АЯ 

常态 分 休 为 何 重 要 ? y 

Е а CDF 有 精确 的 TEE ? 
48-1] 7 [e] 8) т 88 2 fh 2] Ж IB] 83 CDF Е JEU 7? 

为 什么 要 特别 "TP de RR 

E fs] ^f Е 27 Б) Е Së 数 都 可 YA SEUER IE | 

4 a а ЕРЕ: TIRE ? 
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Y 


ч 
= 
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移 说 一 下 大 数 法 则 


° & — 484843843 3E 8 3 E XE 2 Ip? 
° ЕЗ AER BR PIHE d 89 = 3k Ec 49] 2 2/3 
° 4 10 次， 得 正面 的 次 数 比 例 为 6/10 
° — 100 次 ， 得 正面 的 次 数 比 例 为 53/100 
° Æ 10000 次 ， 得 正面 的 次 数 比 例 为 5012/10000 
° 大 数 法 则 : 想 知 道 革 事件 发 生 的 机 率 ? 
ЕЛЕ ® К И › ILS SET SUME НУ. клея 
多 次 时 ， 这 个 比例 就 会 越 来 越 接 近 实 际 的 机 率 |! 


| ] N 
№М- оо 


Prof. Yeh, Ping-Cheng (Benson) EPS FË. 17 
Dept. of EE, National Taiwan University 











ЯЯ € їй (Expectation) 





° 做 随机 实验 时 ， 我 们 很 希望 能 有 某 种 估算 
` 平均 值 是 我 们 平常 最 常 普 遍 的 估算 值 

` 作 古 次 实验 的 平均 值 是 ?一 =? 

` 作 十 次 实验 的 平均 值 是 ?2 =? 


° 不 管 我 们 做 多少 次 实验 ， 平 均值 都 是 一 个 随机 伙 数 ， 那 不 就 

不 能 拿 来 估算 ? 
° Рт! 苗 做 的 实验 次 数 趋 近 於 扰 角 乡 时 ， 这 诸多 次 的 实验 的 平均 值 
会 收敛 到 一 个 常数 ! 我 们 就 用 它 来 当 作 这 机 率 分 体 的 估算 值 吧 | 
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ЯЯ € 48 (Expectation) 


(XE JE X MEE HS ' AE P KERRE 
验 之 样本 空间 为 {1,2,...,n}。 作 实验 入 次 ， 记 
A3 o DAA Му, М», ..., №, Mv 
° -F351& (Mean) : | | № 2 аим 


TP 
一 Ex: 3,7,3,5,...,6 > mean =_= ы 


。 根据 大 数 法 则 x 





я ER | 


| 
lim mean = lim Ух m У.х: Рх(х) 


——— 
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期 望 值 (Expectation) 


。 Mean 值 又 称 作 期 望 值 М2 1 
` 对 零散 随机 变数 昨 而 言 ， 我 们 定义 其 期 望 值 = 








НАЯ, вле 
被 误导 。 | 期 望 值 不 等 於 随机 会 发 生 的 值 


| 1 1 1 
Ex:lexCD = PODER; Mx 71:54 (70:770 





TR Prof. Yeh, Ping-Cheng (Benson) #7 
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随机 释 数 的 函数 之 期 著 值 


e HIME — BEXKER TR SEXE X mic 
任意 函数 g(x) Л ВА, ИР. 
` g(X) 期 望 值 定 义 为 


СО 


Elg(X)]= У J: PxCO 


x=— оо 
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EGE S 





‚ Ex: E[3 x? уо 3x x? .Ру(х) 7 Zà >. 
=3.X% сх? .Рх(х) = 3. ЕХ?] 

` Fla 9001 = X2 La й(х)-Ру(х) 

3 792x990): Px(x) = a- E g(X)] 


. Yeh, Ping-Cheng (Benson) МЕ 
i ional Taiwan University 





РАЛА 
` Ela gX) + B h(X)| 
= »x--o|& g(x) + B h(x)] - Рх(х) 
一 «а: хо g (x) | Рх(х) + В ° be s h(x) | Рх(х) 
=Q: ELg(X)] +В: E[h(X)| 


CNA о 
- Ex: баш = 6 E[X] + 8 E[X*] 


Po y 
bae. Prof. Yeh, Pin ng-Che ав аА 
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ЯН ЎА: АРЕ 





* Ela] 


¿Ú М 
= hx--o €: Px(x) = а: хо Px(x) = а 


Ex: Е|6| = 6 
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第 见 的 随机 变数 函数 期 望 值 


° Хау n^" moment : ECC | 
ЕХ 1 "| = Lx--o X" · Рх(х) 
— Ex: E|X2] & X X X BJ 2"* moment 





- Ex: E|X*| £ X № 5 moment 
° ХНА € XX (variance) : 


Е|(Х — "i = Xe — их)” : Рх(х) 





е y 
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SA 3XC(Vanance) / Cp 
e Variance if 常 符号 表示 为 (CR El (X — их (X — ux). ^ y 


‚ЕСИ ГА, 的 资讯 


| с, 小 G X = Их) | | | 0^ 大 (^ X ^f bà S TEST ЯТ Их) 


ах ^ 


. Ми 的 开 根 号 便 是 标准 差 (standard deviation) : 
Ё 
VVariance 
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Variance 便利 算法 


$ ВЕ 2 АД € 1й / ® XLI 


° X-— Bernouli(p) : 
>Puy=1:p+0:(1- p) =P 
> ox = E|X? |\- их)= Xx-ox^ - px GO — их 





12.5 ре тт 
= 12-р +02 .(1-р) –р? =р(1-р) 
. X-BIN(n, p) : 
m Ex: X-BIN(5, 0.2) 
Hx — np > их =5:0.2 = 1 


> оҳ = пр(1 — p) o? = 5.0.2 (1 — 0.2) = 0.8 





Prof. Yeh, Pin леш ое аА 
Dept. of EE, Nationa 


"t Ro SEXE Rz ERG ДАГ X 


° X-GEO(p) : 





> их = YXox-pxG) = ох (7 p 1: p=- 


> ox = E|X2| — ux - 
k 
> == 
Их р 
> oz = _ kQ- и 


< À 
pr Prof. Yeh, Pin Kain пое а Е 
Dept. of EE, Nat 








$ RÉEL 2 АД 3 1й / XLI 


` X-POl(a) : 
> иу 一 Я 





>05 = а 
° X~UNIF(a, b) : 


а+р 









ИИ: ЖЖ = 


* JA X-POl(a) 为 例 : 
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Ж Ph Te] ЙА 


为 何 想 知道 期 望 值 ? 
根据 大 数 法 则 ， 期 望 值 等 於 
а к А Н) v CER 2 (А 52 ¿= ER RK? 
° 5 E €r (Variance) 87 5 & x 7? 

Tk SE (数学 ) 证 明 的 一 大 要 雇 ? 
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v2 v 
Ww Ww 


Tx HR 


п ACE RAA 





fix №": weibo.com/yehbo А": facebook.com/prof.yeh 
冲洗 格 : pcyeh.blog.ntu.edu.tw 
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本 过 主题 概述 


° 7-1: Eg Z fü П 
° 7-2: I Sé И 
° 7-3: RIFI E ЭЙ И ТЕТЕ 
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第 七 过 
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积分 的 近似 概念 





—2A-A | A2A3A X 


面积 = [^ hdx 面积 — > h(nA) - A 








> 面积 = = _ һодах= = lim у h(nA) - A 


w n=— oo 


ере of EE, st 





期 望 值 (Expectation) 


Е ХЕ, Же, 








RAIA ЖА ВЕ НХ Га Ж E EC 09 25 НЕ #2 dad 
。 将 XX 的 值 以 A 为 单位 乱 条 件 拾 去 来 近 耸 ХЕ [0,A) > = 0A 
结果 Ежа Y (ŽAO X = ХЕ [1A,2A) > У = 1A 
° ЖЖ: 一 мса ^ 


- [py (nA) = P(nA< X < nA + A) | fx (n4) - A) € [nA, (n + 1)A)| > Y = nA 


р 4 
x dv dx 
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随机 变数 的 函数 之 期 望 值 


ка ВАХ mà ‚ЕШ 
函数 g(X) ЛЕ @1%® Ж, ЯН 
| 900) НЕА 


E[g(X)] -oa |fx COR 





E Pad or 


=>, 
ал. ( Prof. Yeh, Pin аи ав аА 
Dept. of ЕЕ, Nat 





НЕНИЯ 


° Ela g(X) + В h(X)| 





= f al [æ g(x) + В h(x)] : f x(x) dx 
- =a: f” gx); у(х) dx + B- f^. h(x): fx(x) dx 


= а. E[g(X)] + B ` E|h(X)| 


Ж Ex: Flo X + 8 X? | = 6 Е[Х] + 8 Е[Х2] 
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期 望 值 运算 的 性 质 





* Ela] 


= Га: fx) dx = æ- f fx(x) dx = a 


Ex: E|6] = 6 
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第 见 的 随机 变数 函数 期 望 值 


° Хи п" moment : 





= f. x" fx(x) ах 
- Ex: Е|Х?| € X BJ 2"* moment 





- Ex: Е|Х?| € Х№ 5" moment 
° ХВ) А € 3X (variance) : 


E|(X — ri = J C — x — их)" f(x) dx 
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s% £ = (Variance) 





° Variance 通常 符号 表示 为 ox = E[(X — их)" | Р 
*ORGUEA MOSMDRSEREX S ГИ WRR — 


fx(%) 0X 小 (> x m их) Fx GO с“ ox ^ (和 不 见得 接近 их) 





ү? p 
° S5 LL 0 PHAR TS IE z (standard deviation) : 


ч 
vVVariance 
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Variance 便利 算法 


* оҳ = E((X — их)" | 
= E[X? — 2их-Х+ p?) 
= Е|Х?| + E[-2uxX] + Е[их| 


= E[X?] —2ux ЕЖ + ий = 











5,38 65 I 2 30 E É / 92 X< 


EA 
«X kar А): 
> рх = 





^ 
>02 = = 

@ ыы (п, А): 
» Hy =“ 


>02 = 二 


к? 





д n lab. ng (Ben ята 


UES 1 2 fh ЖАД E [н / 92 RU 
° X—Gaussian (И, о): 





> их = H 
>а = а? 

° X~UNIF (а, Б) : 
> Их in 
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SE 48 d& E A 
° X-Exponential(A) ` f x(x) -[A я ~ 
Hx 一 | хло dx = J x:Ae ^* dx e ly - Pu 


-| zue^dx-- | xe ^*d(—Ax) x de 41 
ча 0 — 5 “= — 


TM sd 


0 m ud 0 > 
=(—) xe ^| 一 сал) ] ле olx = | 
K— 20 ша 
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Ж Bp Te] ЙА 


кие Ax T 
i$ A EA SE Кл) dS 387 НЯ Їн? 
° ， = š | 
УА P 2 4ë - SER ELT 
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7-2: РЕН Ех Z рн EX 


F T 
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КЕЛЕ З 3C 8] vf XX 


。 随 机 变数 XX 的 任意 函数 g(X) 
也 是 一 个 随机 变数 
通常 被 称 为 Derived Random Variable 
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如 何 求 JA) TAE th ? 


° X X IS ER ` 
一 直接 推 g(X) 的 PMF 
— Ж g(X) 的 CDF， 再 微分 得 到 PDF 












ЗЕ X XXX 


° Ex: ЖЕЖ ТОГ ° FR- EXCESS y^ 
ХИ Bho X-GEO(0.2) ° $ EENI Ж 
— Eh 8H › FE. Ë <; JF @ ARGA йт) ру ^ Жи 
% Ж, ИАА У 2]21,2,3 不 同等 级 : 


s ]1<Х<3; 
У = 9(Х) = (2) if < X < 6; 
if X > 7. 
НУ = duet DE E ? 


baa. di 9 Prof. Yeh, Pin ng-Che ng (Ben ү ае 
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RE HA 


1, if 1 < X < 3; 


3, if X > 7. 
° X-GE0(0.2) > рх(х) = (1 — 0.2)X-1.0.2 = o$” '.о.> 
° py(1) = px(1) + px(2) + px(3) 
= 0.2 +0.8.0.2 + 0.82.0. 2 
° py(2) = рх(4) + px(5) + Рх(6) 
= (0.8)3.0.2 + (0.8)*.0.2 + (0.8). 0.2 
5a" ру(3) = PU = 3) =1- ру(1) – ру(2) 
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ВЕН X 2 34 3k 


о ХВЕ УКЕ З ЗС > 
У = g(X) 亦 为 离散 随机 变数 
° Y = g(X) 2 PMF 为 
Pœ) = 
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ië £ X modd 


° Y = g(X) E X A i& €& 5i 1 85 3x p 
жя g(X) 的 CDF : 
F jx (y) = Pig уч < y| 
° Z g(X) 可 微分 ， 再 对 yy 微分 得 到 PDF : 


а 
Гасо = dy 1900 (J. F goo (У) 









ië $ë X Z а (g(X) = aX + b) 


° Ex: #Y=3X+2 ЗҮ 的 PDF 8 
跟 fx(X) 之 关 休 为 何 ? 
Fy(y) = PY < y) — |o= £ i; P0 = ау ЖИ, 


ү E ЕЕ | 


у — 2 


ч 





= P -€— (= Uie 


y—2 





< | 
ал. ( Prof. Yeh, Рт т nen eid 
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连续 站 之 函数 (g(X) = aX + b) 


° 若 Y=aX+b нах ' Ri 





Fy(y) Pax + bs = P(x(3 
| 1 
fy(y) = 1570) = ail 


what if a « 0? 


aX + b-— b 
Fy(y) = Р(ах +b < у) = P > 


а 


а 
fv) = EFO) = = А 
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连续 站 之 函数 (g(X) = aX + b) 


° Ex: zr X—üExponential(À) > B Y = 2X ° 
я] Y 2 4 3E 43 m 2 7 
fx(x) = Ae ^* и(х),У = 2X (a = 2,b = 0) A bx 








À 
> Y-Exponential 2 
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ЖАХ 2 h (0(Х) = ах? + aX“ + b) 


。 Ex: lY =2X2 +1, ве 


| X-UNIF(-, 7) ] 请 问 Y 的 PDF 为 何 ? n 
= y < 3: fx(x) 

Fy(y) = P(Y = 2X? +1 < y) 

Oa — р x? "i m = =) 


N | 
_ -人 = < X < 一 一 z 2 74 Дай. 
2 
En y > 3: fx(x) 
m - к — fx) dx 
ое _ É. аг. I š 
ae. Y Prof. Yeh, Pin св Dn и 
Dept. of EE, Nat 


y 


2 











ФАХ zd (g(X) = ах? + b) 











—1 
ERI [= _1, [у-1_1Ңу-1 
У үч у-18 =g 2 4| 2 
—1 
2 1 1| |у—1 


y > 3: Fy(y) -| -dx = = 
-1 8 8 2 
>y & 3:19) = 374 2 "4 


2 
зе LI y-1 |. 1 | 2 
y > 3:frO) = тов | 2 — 32 |y-1 
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Ж Bp Te] ЙА 


Пи i ХЕ? 

* XR SS LS EN C T Ad g(X) 之 PMF 

Ал, dE g(X) 之 CDF 再 微 
分 得 到 PDF 比较 好 算 
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7-3: МЕРЕ Е 97 fn PR KIENT 


第 七 过 
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把 人 条件 机 府 用 在 机 举 分 候 上 


* Ex: 为 了 更 了 解 宅 宅 的 心 ， 店 员 妹 亦 开 始 战 LOL ° 
E, 4uJE B AK S&LOL2 t X-UNIF (1,5)。 若 已 知 44 
店员 妹 战 了 两 场 仍 战 意 其 渡 、 继 续 战 。 请 问 在 此 情况 下 ， 店 员 妹 
АН S&LOL23Z t X 2 43€ 3 ff 2f] ? 


В: ВН "m 
[pas 22)- P(X = x|B) GQ 
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A TF 3& 35 47 8 (Conditional Distribution) 


Ах BEER IAE EO EPM % p Ji 
x x cox НВ) с 则 在 此 情况 下 





之 条件 机 率 分 体 为 5 X 
| px (x) 
— РМЕ: Рхв(Х) — j E P(B) ' X IE 


— CDF: че” == У, рх(х) 


и<хиЕВ Р(В) 
DO 








ats Dx|B (и) E 
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把 人 条件 机 府 用 在 机 举 分 候 上 


° Ex: АЖЕ ЛЕУ EBE ° iB ДР тушр] X ° 
从 零 到 十 分 镜 问 可 能 性 均等 。 若 店员 妹 已 等 了 
五 分 包车 还 没 来 。 请 问 在 此 情况 下 ， 等 车 时 间 导 之 机 率 分 人 为何? 
X-UNIF(O, 10) f x(x) 


1 
B:X > 5|2 P(B) => 














e$ / 
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人 条件 机 率 分 体 (Conditional Distribution) 





若 发 是 一 连续 随机 人 变数， 其 PDF 为 


fx) 。 Бо Вежа АТ 
之 条 件 机 率 分 做 为 : 


x € B: EO 
(P(B 
x€B: [0) 
















一 "DH frg = | 





- CDF: Fxlp(X) 一 三。 f xiB (и)4и — J_o<u<sxucB A du 
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1Ж Р-Н € а (Conditional Expectation) 


° 若 知 及 已 长生， 则 此 情况 下 休 件 期 望 值 为 : 





СО 


д. Рх|в\ (х) (BEBI) 


x=—oco 


Е[Х |В] 24 .& | 
хабдах бай, 
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1Ж Р-Н € а (Conditional Expectation) 





° 若 知 已 已 长生， 则 此 情况 下 休 件 期 望 值 为 : 


СО 


.CD P ERO 


E|g(X) |B] = { ro o 
| абд-/хвбдах бе) 
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КЕ € (а (Conditional Expectation) 


° 若 知 中 已 发 生 ， 则 此 情况 下 休 件 期 望 值 为 о 





Var(X |В) = E [(Хв-ихв) | = E |(X — иав) | B| 
= Е [ХЗ] В) — (ив) 


ӨЗ Prof. Yeh, Ping-Cheng (Benson) #7 
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K 16 (Memoryless) 








宅 宅 与 店员 妹 相 约 出 门 。 宅 宅 出 门 前 在 战 LOL， 场 数 
X~GEO (0.2)。 店 员 妹 等 了 两 场 揽 ， 宅 宅 膛 在 玩 。 
店员 妹 甚 怒 ， 怒 催 宅 宅 。 宅 宅 日 “ 快 好 了 、 快 好 了 |。 问 宅 宅 剩 余 场 
3t X AREA AIT в:Х > 2х] = kj; 一 2 

lPxc) 0.8^-1.0.2 [0.8 1.0.2) P 
x € B(x > 2): = < — = 0.8“ ° .0. 2 
рхів(х) = x € B(x > 2) P(B) x-3 0. 8% 1.0.2 [0.82 - 0.2 па — 


x < 2: 0 











py (х) = P(X' = x) = P(Xg — 2 = x) = P(Xig = x + 2) 


Рхв(х + 2) = 0.8*5*^5.0.2—0.8* 1.0.22 X'-GEO(0.2) 


W. j 
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Ж 16 (Memoryless) 


° 店员 妹 与 宅 宅 相 约 出 门 。 店 员 妹 出 门 前 化 妆 时 间 为 
X (ER) > X~Exponential(1) ° 286 :5— -h B$4% > - 
仍 未 完成 。 宅 宅 甚 怒 ， 既 催 店 员 妹 。 店 员 妹 日 ” 快 好 了 、 快 好 了 J」。 
问 店 员 妹 剩 饼 化 妆 时 间 X 机 率 分 体 为 何 ? B:X>1,X =Хв—1 





Fy (z) = P(X € x) =Р(Хв-1<х) = P(X s € x + 1) 
Fxig(x + 1) = Г” fx QRDdu = =? Fx (x) =? f: (x) =? 


Dept. of EE, National T 





Prof. Yeh, Ping-Che и аб 
ууап Universit 


K Е (Memoryless) 





B:X >1 
fx(u) 1e е“ 
иЕВ: P(B) Р(Х>1) 1-Fy(1) 
— > 1 —u —u 
fxg) = 4 (и> 1) _ e E аа) 
1-(1-e1) e^ 
и B: 0 
> Еу(х) = Р(Х' < х) =Р(Хв-1<х) =Р(Хв <х+1) 
х+1 


х+1 - 
fxlp au) du = J e "-Ugy = K aiii P 
m I 
— —ex+1-1 m (-е 0-7) = 1 I ex 
> fx (x) = 1: e lx, x > 0; 0 otherwise. > X' -Exponential(1) 
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K Е (Memoryless) 


° Geometric 跟 Exponential ж 7+4 L- 
TA РН Я 

不管 事情 已 经 进行 多 久 ， 对 於 事情 之 后 的 进行 
— ЖЬ > F ZR A | 
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Ж Bp Te] ЙА 


° YF 6 > ВЕКЕ Sk 09 4T 2 D 
RHI AE mung PS: VR TEARS RR 
° JETER TA SE ках шив. 可 党 的 随机 变数 | 
° im 个 健 人 全、 可 党 的 随机 变数 ， 人 家 一 般 随 机 变数 
je 55 F EF ER 8 АР ЛЕ А ! PMF (PDF) * CDF > 
Я 74а ` Mean ^ Variance 等 
оч BAJA? 
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本 过 主题 概述 


° 8-1: P TRAE AT fh 
` 8-2: КОКЕ ЭИ: 
* 8-3: ЗЕЕ E B 








b... (d Prof. Yeh, Ping-Cheng (Benson) € A R 2 
Dept. of EE，National Taiwan University 





3-1: 联合 人 机率 分 伯 
(JOINT PROBABILITY DISTRIBUTION) 


TB УА 
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曾 小 明 出 国 去 交换 时 


` X: 小 美 脸 书 /QQ ЖЕН ^ X-UNIF(8, 12) 
` Y: J EAR ОО 离线 时 间 ，Y~UNIF(8,12) ^ 
。 Z: ОО 离线 时 间 ，Z~UNIF(8, 12) 

° RÈ X,Y, Z 都 是 离散 随机 缕 数 





(x): 1 1 1 1 1 (y); 1 1 1 1 1 (zy: 1 1 1 1 1 
Рх 5 5 5 5 PYY) 5 5 5 5 Pz): е 5 5 5 5 

8 9 10 11 12 x 8 9 10 11 12 y 8 9 10 11 12 z 
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曾 小 明 出 国 去 交换 时 


° ЖЖ SESS] Х El El SESR SEIS] Z 一 起 看 呢 ? 
° Wk P(X = x,Z = х): 

Z 
12 










11 » ө ө ө 
10 9 ө ө 
9 о e 
8 о © 
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793 dx 3 UB ДНЯ | : 


° КАЗНЕН X Eb] E] SE SR B$ l] Y — жеж % ? 
° $€1 P(X = X,Y = у), ЖЖ | 
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Йй Ө TAE ЭЙР 


同时 将 多 个 随机 变数 的 行为 一 起 拿 来 看 ; 

我 们 可 以 看 出 更 多 以 往 看 不 到 的 呐 讯 | 

` 同时 考虑 多 个 随机 变数 的 机 率 分 亿 称 之 为 联合 机 素 分 信 
(joint probability distribution) 

° ЛАУ Z fh ВЕ 8$ а 27 7] 
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联合 PMF (Joint РМЕ) 





‚ Жж Х,Ү БАКИ, А Ж 
可 以 定义 他 们 的 联合 PME 
рху(х, y) = P(X = x B Y = y) 
° 联合 PMF ЖЖ í X, Y 5 8 33x34 





Prof. Yeh, Ping-Cheng (Benson) £ A x 
Dept. of EE, National Taiwan University 









联合 PMF (Joint PMF) 


Ех: 小 美 离线 时 间 X S] ЕЕ НЕП Y 的 联合 PMEF : 
Pxy(x,y) = P(X == х, У = y) y 

12 

一 О 

Reog (4.‹°) 11 


СИ), = 5 


Mt 
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联合 PMF ЕТЕ Я 


es Дл 二 
* 0<руү(х,у)<1 AV 


хоо pa a pxy (x, y) = 1 
° X,Y 独立 
Рху(х, y) = Р(Х = x,Y = y) 
= Р(Х = x) : P(Y = y) 


= Px(x)Py(y) 
° МЕЖ В: Р(В) = 2{ху)єв} xv Ge y) 
Ex: B: ` F gg H$ Fa] + 82 J ЖЕ 
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联合 CDF (Joint CDF) 


。 XE [8 v 58 1x SEXE X, Y 0] P EAE > 
我 们 也 可 定义 出 所 谓 的 联合 CDF : 
|Fxy(x,y) = P(X < (B) Y < y) = P(X € x,Y € y) 





A 1 
Fxy(10,10) == 12 " 
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联合 CDF (Joint CDF) 


° XE Je у E ES x Se Х,У 8g Ni € f c 
我 们 也 可 定义 出 所 谓 的 联合 CDF : 
Fx y(x, y) = P(X < x H Y < y) = P(X < x,Y < y) 





2- 
Fxy(9,11) = © 
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联合 CDF (Joint CDF) 








Бы "Ж A 
° Fyxy(x,y) = P(X < x El Y < y) = P(X € vx,Y < y) P. ^Y. 
= (X,Y) 会 落 在 黄色 区 域 的 机 率 z. 
eu) 


1D: Fy(x) € P(X < x) 
= (X, Y) 会 落 在 黄色 区 域 的 机 率 
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联合 CDF 的 性 em) 
S UM t ' 
7 Р | 
` 0 < Fxy(x,y) <1 x. 
° X X1 < x НУ! S y>; AI Fx y(X1, y1) < Fxy(X2, Y2) 
° Fyy(x, оо) 一 Р(Х < x, Y ZO) — P(X < х) =|F x(x) 
° Еху(со, оо) = Р(Х < со,ү < со) = 1 
° F x үүх, 一 co) = P(X < x,Y < –о) < P(Y < —co) = 0 


Ехуб—со, у) = Р(Х < –о,Ү < у) < P(X < –о) 2 ў 7 
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联合 CDF w t %4 


四 方 格 性 质 : P («X&*2)-2 £o» 
P(x4 < X < Хэ, Y1 < Y < у>) 





ж > к.) | L 


= Рху(Х2, У2) — Еху(Х2, y1) — Ехү(х1,У2) + Рху(Х1, У1) 
o Mv) ona» ) É 
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AX, Y АЕ Е? 





° 回想 之 前 一 个 释 数 ”如 何 延 仲 Сй x 
时 PDF £ JE = ? 31] у 4l] % 3: 8] 3 26 ? 


— ут РЕЇХХ+АХ]) гы x 
f x(X) i lim Ax ° fxyx,y) = tim 一 一 | 
Ay 一 0 
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联合 PDF (Joint PDF) 


° ХУАНА, RATARA 











X, — 
јх y(x у) = и Ax Ay 
= lim == — 
Ax—0 AxAy 
Ay 一 (0 
— pim EZY + АЖ У + Ay) 7 Fxy(x + Ax, y) — Fxy(x,y + Ау) + Fxy(x, y) 
Ax0 
о-о Ахду 
_ | 1 |Fxy(x + Ax, — Fyy(x,y + Ay) _\Рху(х + Ax, y) — Fxy(x, y) 
Ax0 Ay 
Ay0 ) : £ | 4? 
di д Á sov 2 E. (x. 
bas. d Prof. Yeh, Ping-Cheng (Benson) & A x p Ux x 1 x е ( 
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联合 PDF (Joint PDP) 
Тху(х, У) = lim a NL T P ere 


> Гху(х, y) = СУ 


дхд 
> Ехү(х,у) = f" f ху(и, v)dvdu 


° ID: Ax ## j > P(X € [x x + Ax|]) = fx(x)- Ax 
Ax, А 

。 2D: * ^ > Р((Х,У) Е B) = fyxy(x, y): Ах. Ay 
极 小 时 n nd — — 
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联合 PDF 





Ex : > \ 美 等 公车 时 间 为 Х, 小 国 等 公车 时 间 为 Y | DEA. 


Хуже d Ri UNIF(0, 10) ° 8] 
X,Y 之 联合 PDF 为 其 他 联合 PDF 的 例子 : 


Bivariate Gaussian 
z = fxy(X. y) ы 
—Má Do 
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联合 PDF (Joint PDF) 


* 联合 PDF 亦 决 定 了 X,Y 的 联合 
РЕТ 
* 联合 PDF 跟 联合 CDF z НВА: 


Fxy(x,y) = f f f xy (u, v)dvdu 


0^ Fy y (x, y) 
f xy (x. у) = ^ дхду | 
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联合 PDF 5+ Ж 





° fxy(x,y) > 0 

° f f Гху(х, у) ахау = 1 

` Æ X,Y 3 > fxyx,y) = fx(X) fv) 
° 对 任何 事件 B, z = Їху(х,у) 


Р(В) = || ухубх,у)ахау |a 
(x,y)eB 100 
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Ж Bp Te] ЙА 


”何谓 联合 机 率 分 体 ? 
为 何 要 看 联合 机 率 分 体 ? 
联合 PMF 的 定义 ? 

联合 CDF 的 定义 ? 

联合 PDF 的 定义 ? 
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8-2: SEE ERA E ИП 
(MARGINAL PROBABILITY DISTRIBUTION) 


TB УА 
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0.2to.(t2-o5 > o. 2 Ç 
Q.ot«g.-to.4 2 0.35 
0.25 +0. [+ o.(# = e_? 


° x)=? =? 
px(x) prQ) 7.) - far (8,9) t оү ({ 4) y fee duo) 


Ф, 4) 2o.4, Fx) 20.3 
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i* 85 PMF (Marginal PMF) 





。 已 知 联合 PMF рху(х, y) » AIT K 48 


рх(х) ^ pyCy) » 48 2 5: PMF 


— m c 
* FPS PMF X7 
- рх(х) = Р(Х = x) = Ху=-»Р(Х = x, Y = y) = у= Px y(x, y) 


(X = x,Y = y) = x=- Px y(x, y) 





— py (y) = P(Y = y) = х——- 
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#8 PDF (Marginal PDF) 





”已 知 联合 PDF fxy(X,y)， 则 可 求 得 
fx CO ` fy) > #2. A Ef PDF 

° Ш PDF 算法 : 
fx) f. xy Go y)dy 


- fv) = J fxy(x, y)dx 
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i* < PDF (Marginal PDF) 


ww ш 


° Ех: 已 知 
_ (0.5, if 0 < y < x < 2, 
fxy x, У) ш D otherwise. 


/х(®) = f ` fxy (x, y)dy 


x 
_ | о.54у=0.5х if 0 < x < 2, 
0 = 








0 otherwise. 


f 0.5dx=1-0.5y if 0 <y<2, 


0 otherwise. 


人 


fy(y) = J, fx yG, y)dx = | 
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。 iE ES PDF 的 定义 ? 
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HA PMF 下 的 期 望 值 


HARER ARERI S Х W$ 
其 任意 函数 g(X) фах: 


FlgCO] = У g(x) px(x) 


e 








° E [5] Bf JS Е EQ E Y. их Ув, 他 们 j 的 任 
вв ВСУ) 的 期 望 值 是 JCY = x< 
sh „EUX, Y ү] = 2 > РИ Pigs h(x, y) | px.y (x, y) 





联合 PMF ТЕ 


” Ex : X,Y 分 别 为 小 美 、 小 明 脸 书 /QQ 离线 
上 时间 。 联合 PMF m 


uw psp 





E|IX — Yl] = 55-5 Ay--o |x — yl ° Pxv O6 Y) 
=1.0.05+2.0.05+1.0.1+Т. 0.1+2-0.05+1:0.1 
= 0.55 
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联合 PDF 下 的 期 望 值 


° 回想 只 考虑 一 个 连续 随机 变数 处 时 
其 任意 函数 g (W) 的 期 望 值 是 : 
E[g(X)] = 三 g(x) кодах 


= [e] ШЖ Jë. vig TE] Ка X, У 时 ， 他 们 的 任 
Š АЮ h(X,Y) 的 期 望 值 是 
E|h (X, Y) ды y): fxyx,y)dxdy 
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联合 PDF 下 的 期 望 值 


if 0 < y < x < 2, 
. : 已 知 f y y (x, и" | eis 


E|X + Y| -| 三 (x + y) xy уМхау 


du (x + y) 0. 0. 5dxdy 


“2 xy] 2 3 у 
= — — a 1 — — 2 = — 一 — 3 — -一 = 
Ea у = [( +y Jay p 2| pA 
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НЯ 


[a h, (X, Y) + бл 


ЕР 









,Y)| = aE|h4(X, Y) 





£ <N L v —— 
= $ > [ahı (х, у) + Bh, G y)] pxy Go y) 


X——00 у= — оо 







h, (x, y) px y (x, y) 


В E[h;(X,Y)| 
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НЯ 


证 明 (12 48): 
Ela h4 (X, Y) + В h,(X,Y)| 


E|a h4(X, Y) + B h; (X, Y)] = zE|h, (X, Y)] + BE[R2(X, Y)] J^ 






co 400 E ку A 
x j J аһ, (х,у) + Bh;(x,y)] : fxy x, y)dxdy 


— OO 


-a| | m» /ху(х,у)йхйу + 


e E|h4 (Х,У) | 
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h;(x,y)f xy (x, y)dxdy 





В Elh2 (X,Y)] 


НЯ 


жХ,У 独立 ， 则 





E|g(X)h(Y)] = E|g(X)] : Е[Һ(Ү)] 
(a w s= — Mean ———c 


„7? P X: x, Y=) 
gx) - h(y)  Pxy Go y) - д: Р) 


25 8H (В): 






x) - h(y) ` px GO рубу) J 4 








> h(y) : py(y) 


yo — 








=EL] (ЕГА) | 


р ' 


НЯ 


z X,Y jj › Я] 





E[g(X)h(Y)] = E[g(X)] : E[h(Y)]| 48 
S BH (3 48) : E ч 
Elg Oh = I 960): h(y) f xy(x, y)dxdy 







РО xGOf vo) dxdy 


- _ gGofx God Г hO): frO)dy}= Elg QO] ЕСИ 


__ 2990 Ef IG (| 
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Variance 48 BÀ п) E 8 


` Var(X + Y) = E[(X + Y — E[X + Y]?] 


Hyx+Hy 





< X, YU > 2Е[(Х — ux)(Y — uy)] 
= Е[(Х +Y — их — ру)? s = 2E[(X — nx)]E[(Y — 7-1 — 


— EI( X — Y => Cov(X,Y)-0 QR &C 
(X 7 Их = T Yu) | > Var(X + Y) = Var(X) + Var. 





= Е[(Х 一 - ug? t (Y — рү)? + 2(X — ux)(Y — у) 
= E[(X — их) ux)^] + Е|(Ү — uy)? | + 2E[(X — ux)(Y — ny)] 


= Var(x didi X,Y W 
Karo) +0 | сенг; Cov (X Y 
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Ж Bp Te] ЙА 


° ZAER? 
° Bj S ask? 
Е тн, Ва а 








b... dd ® Prof. Yeh, Pin ры паев од ы 
Dept. of ЕЕ, Natio 


£, 





п ACEdA AES RA 


mit: weibo.com/yehbo Ж: facebook.com/prof.yeh 
SPESE: pcyeh.blog.ntu.edu.tw 


Prof. Yeh, Ping-Cheng (Benson) X £ x 
Dept. of EE, National Taiwan University 





本 调 主 题 概述 


° 9-1: 随机 变数 之 和 

。 9-2: МОЕ 

9-3: 多 个 随机 代数 和 

9-4: P КЖ (ВТ) 
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9-1: ВА Ех Z Жп 


Fa JLI 
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Z = X + Y 00488 ë tt? 


° Ex: E sRÀ&JE R € FAL ARSR aA CA X туйт WN 
X 碗 与 豆腐 Jj x Y 碗 的 联合 机 率 分 体 рху(х, y) <€ 
兄弟 们 约 老 张 收 提 和 后 喝酒 小 聚 。 老 婆 规定 老 张 洗 完 碗 后 才能 赴约 。 
请 问 老 张 洗 碗 数量 的 机 座 分 体 是 ? 









рхү(1,2) + pxy(2, 1) 
pz(3) = p(X tY = 3) =рху(0,3) + pxy(3, 0) 
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Z = X + Ú WE? 


° Ex: 小 明 高 国文 作业 的 时 间 关 和 与 算术 作业 YY 的 联合 
机 率 分 体 fx y GG y) ° 2608 P1 81] 8H 98 EE ни 
етте "m 1 "um 
Ж; 3% ЭЛ, E839 СЛЕ Ж 18 Л БЕ 29 ° ЗН pb] 8806 5 Z B |a] 


15% 5 ? 
| СО 
| fxy(z — У, y)dy 
| m “Аы. ЭЧИ” —— 
Prof. Yeh, Ping-Cheng (Benson) X A x 
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As mp > Paer -Pett ) 





= Х,У ! 






| continuous convolution | continuous convolution 
— P ————— —5Ó— WM 
СО СО 


faz =|| fx hx | хуи дах = | fat лида 





$4, | 
A. Prof. Yeh, Ping-Cheng (Ben 6 
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如 果 有 不 只 两 个 随机 释 数 ” 





= А1, ... T X, 独立 ^? fy ee О CMT 
(ач. px (x) ЧР» (х) * px, Qc) * px, (х) * =: * px, GO 
(2): ROO O '* f x, x) 


° RAIE” P? МСЕ 
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9-2: МОЕ 
MOMENT GENERATING FUNCTION) 


Fa JLI 
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Convolution 很 不 好 算 ， 怎 办 ? 


° 先 看 个 例子 吧 | 辛苦 的 红娘 业 


转换 : ЛК ош ле 
换 新 的 活 名 、 千 型、 身分 





RA : 一 务 一 女 、 充 郊 丢 领 


ЛЕ =E - MEE : w s es 
。 +AA Fé Ee] 5485 , н c» 
Е : жат 和 你 我 的 相互 依 假 ! 


— ( 超 简单 ) 





- 逆转 换 : 送 他 们 回 文明 世界 
| | Prof. Yeh, Ping-Cheng (Benson) # 5 x fÉ 此 在 EË 了 
| Тама 
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Convolution 很 不 好 算 ， 怎 办 ? 





° 辛苦 的 convolution， 有 法 偷懒 ? 


ЭБЕ МСЕ #5 






nei: RRIT 
| фх, ($) - ФфФх„(5) 
сан | ( 起 简单 ! ) 


a 逆转 换 : (Es IERI x 世界 
k > À Prof. Yeh, Pin ng-Che ng (Ben 从 此 在 一 起 了 


Dept. of EE，Natio 





Convolution 4R ЖЕ » Еж? 





° Æ №) convolution， 有 法 偷懒 ? uil 
转换 : 送 他 们 到 НЯ. 分 别 作 МСЕ SS 


CLA) = Ele фа Ee], фи, G) = Ele? 
WU —— И 
CE 


WA : THSERAÍI 
Px, (5). $x, [oe Фх, (5) 
( ERME! ) 





= 逆转 换 : 从 s 世界 送 回 x 世界 
w Prof. Yeh, Pin kuqa hd 从 此 在 一 起 了 ! s 
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Convolution 很 不 好 算 ， 怎 办? 
° 3-3 5 convolution， 有 法 偷懒 ? 





转换 : 送 他 们 到 s 世界 ， 分 别 作 МСЕ SEE 
б Beso, (5) = E[e* ?| 99x, (s) = Е[е* "| 
BR Qu chat 
hs X 


WA : THSERAÍI 
Px, (s): $x, C фх, (5) 


( 超 简单 ! ) 





9 (93 358818 : (E s НЯ х 世界 
РОЧ... ven, Pin ng-Cheng (Ben om ЖЯ 从 此 在 一 E | 12 
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МОЕ (Moment Generation Function) 


° МОЕ Фх($) = š 


СО 


2, ge. рх(х) 
фх($) = = 


e°”. fx(x) dx 





d 15 #940 TON, Ж 做 2 Px CA) 


—— > 


3 
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我 说 МОЕ 51+ 94 МОЕ 呢 ? 


° 还 记得 什么 叫 moment *É£ ? E[X"] т wert 
° x(s) Ik moment я Bj] 4E ? ЕХ case : 


фх(8) = Ele] = 》 er pyGO 


SR Le ——əeuà | " 
$x(s) ивр. (ne 2 рх (x) = > || px (x) 1x. e px(x 


e фу(0) = — boe (Xy е? ке x (X E эь uu E mu = Е|Х| [æ Mowent 
г @ с ООо = YE ext рб) = EB] n ment 
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我 说 МОЕ 51+ 94 МОЕ 呢 ? 


° ЗЕНА moment 9$ ? E[X"] 
° Фх($) # moment 有 " (95 2 3$ 48 сазе: 





фх(5) = = е°*.] y (x) ах 


$x(s) = Ке (х) ах = 








|a = = f х sx, fy (x) dx 


` фх(0) = „х-1-/у(х)ах = E[X] 
fo) = E a e fi dx| _ = J х". f. GO ах = ED 





Dept. of ЕЕ, National Taiwan University 


МОЕ РЯ 
` Y-jlax e b е 
фу($) = = Е[е$ | SN 

= Ele фо =] 


_ (gh = 


(EP) pra 












SR — 
KERJ RETE RMAN x Ж 85] 48 fu 


"Фу (5) =1-р-+ре” 
> фх($) ч Px, (s): Px, (5) = фх, (s))= 1 —p + pe° |" 
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常见 离散 机 率 分 体 之 MGF 





° X~Geometric(p): 
px(s) = Е[е5^] = Z e?" fg) 


(== 


° X—Pascal(k,p): # 1 k + 3 028 958 ти 
成 功 花 多 少 次 十 第 2 号 成 功 花 多 少 次 十 .+ 第 下 号 成 功 花 多 少 次 
> X = X, + X; +: Xy, X,  х, X; - Geometric(p) 
一 5 — £ 
== $x(s) = Ele] = Ф e)... Pats) = (4. <) | 
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常见 离散 机 率 分 体 之 МОЕ 


° X—Poisson (a): 
$x(s) = Е[е5^] = 


* X-UNIF (a, b): 


$x(s) = E[es* | = 





. Yeh, Ping-Cheng (Benson) X A x, 
ional Taiwan University 





"r R$ LUE 4 fh МОЕ 


° X— Exponential(2A): 
$x(s) = E|e°*] = 





° X—Erlang(n, А): 


ХЕХ, + zt +. sç; Xn, Xi 38 x, X, - Exponential(A)) ;^Exponential(A) 
> 4x) = = Á (9). «fe i) = undo] — e] 


Prof. Yeh, Pin вне ава а 20 
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"Hr FB RES mz МОЕ 


* X-UNIF(a, b): 
$x(s) = E[e?^] = 





° X—Gaussian(L, o): 
$x(s) = E[e?^] = 





. Yeh, Ping-Cheng (Benson) X жж 21 
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独立 随机 变数 之 和 


° X,, X>,... 独立 ， 且 各 上 自 都 有 一 模 一 样 的 








{Xə LID. 
Independently and Identically Distributed 


` ХЕХ, Xo t Xn AE] o A X 063483 245 ? 
BEC рх(х) = Рх, (х) * рх, (Хх) * x Dx, (x) КИ 
连续 : fx(X) = fx Ах) * f x, (x) "5 * f x1 (X) i 


Ук) 75 (s 
фх($) = [фх, (5) — 
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Ех: ЖЖ а) š] 


° 每 司 饭 粒 的 理想 重量 是 13 UL o EDS ERE C 
每 次 抓 人 饭量 为 常态 分 伟 ， 期 望 值 是 14 o HUE E 3 。 
Bp C REUS SR E 100 482 5] 4 SETK › ЖЕНЕ 5) ЧТ А 2,7048 ° 
请 问 将 太 每 天 吃 的 饭量 的 机 率 分 休 ? uu?) 








2 ç2 


> фх($) = [px (| = [2157 
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ЕЛА 33x. 2 23] 3L 8 1% Sé До 


09 сузсо X, X» LD 7 


ж N W DC EE EX ЕТЕТ yi ' ARX AIIE AT fn 


Х>х е - t Xy 















找 Ө) 到 2 фу(5) = = Efes х = Ele SX1 十 SX2 十 … HSAN |] 
= El = P е) 
= Ey y [Ее ej... E enc 


amm $x,)). my 
s= = — E] 


- 2, In(éx(s)) п. 5 (n) = фу (in (x, (s) ) 


= Eu [px (s)| , 


СО 


< 25 


$ 





Ж 
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Ex: Ju I AR ЯЛЕ ? 


° PÉ] AU МХ ВЯ, ЯД, 





О Е 1. ШШШ 
=] 2 $R В в = 5] К = х — 18 Poison ЭИ, MZAA 73， 将 太 功 夫 依 然 没 有 长 进 ， 
每 次 抓 的 饭量 为 常 驴 分 候 ， 期 望 值 是 14 ， 标 淮 差 是 4。 请 问 阿 明 每 天 吃 的 饭量 的 
REDA? 

М=РО1(75) > фу(8) -|e7s(e-1)) 


X = Xi + X; ++ Ху ~N Ф 


一 фх, ($) е145+85 


фх(5) = фи (т (фх, (5))) = ccm = eS (x, 0-1) ~ ors( ett -1) 


wa 
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9-4: 中 央 极 限 天 理 (RR 16А 55) 


Fa JLI 
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数 个 独立 Uniform 3& £& F5 4% && р 





X4-UNIF(-10,10) 


PDF: s 
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数 个 独立 Uniform 3& & F8 4% р 


X1 X4 TAX. 


PDF: j Н 
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29 


数 个 独立 Uniform 38 2 Ka 45 ®^ о 





X1 X4 t X? X1 + X> + X5 = 


1:5 14 Ü 
1 1.2 

1 15 

10 

e 

0 0.6 
0.4 

-0.5 3 
0.2 

zi 0 0 

-10 -5 Ü 5 10 -20 -10 Ü 10 20 40 -20 0 20 40 
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数 个 独立 Uniform 38 2 Ka 45 ®^ о 





X1 X4 X2 X4 + X> + Хз 4 


1 
1 15 
10 
e 

0 0.6 

04 
-0.5 5 

0.2 

E I 1 š š -20 0 20 


40 -20 0 20 40 


X1 十 A 
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数 个 独立 Uniform 38 2 Ka 45 ®^ о 





X1 X4 t X? X1 十 入 > + Хз жа 


15 14 
1.2 
15 
° 0.5 0.8 
° 10 
i 0.6 
04 
-0.5 3 
0.2 
-1 0 0 
-10 -5 0 5 10 -20 -10 0 10 20 40 220 0 20 40 
300 5000 
250 4000 
200 
3000 
150 
2000 
100 
En 1000 
00 -20 0 20 40 {0 0 50 


ЖИ XI ++. 
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数 个 独立 Uniform 3& & К 6 р 





X1 X4 t X? X1 十 入 > + Хз - 


15 14 
| 1.2 
i 15 
10 
e 
7 0.6 
04 
-0.5 3 
0.2 
-1 0 0 
10 5 0 5 10 -20 10 0 10 20 40 20 0 20 40 
300 5000 jp ei 
250 4000 8 
200 
3000 6 
150 
2000 4 
100 
50 1000 2 
0 
40 220 0 20 40 © 0 50 oo -50 0 50 100 


Ху t T XA Ху РА Ху ++ Аб 
МА 
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PDF: 





5000 
5000 
4000 
3000 
2000 
1000 


"0 10 20 30 40 


Xi T T XA 
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数 个 独立 Laplace 随机 变数 和 








X1 X4 t X? X1 十 入 > + X3 


0.14 14 
0.12 1.2 
0.1 1 15 
° 0.08 0.8 
10 
° 0.06 0.6 
0.04 0.4 5 
0.02 0.2 
0 0 0 
-10 5 0 5 10 -20 -10 0 10 20 40 20 20 40 
а 
300 5000 peu 
250 
4000 E 
200 
3000 
150 4 
2000 
100 
2 
50 1000 
PT. -20 0 20 40 {0 0 50 КТ -50 0 50 100 


ХХ ХХ Xt Xe 
— ¿qA._L 
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数 个 独立 Uniform 2 24 Е № &% fo 





0.07 
0.05 

РМЕ: : 
Ы 0.03 

0.02 

0.01 
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数 个 独立 Uniform ВХ E 28 8 


X1 X4 T X2 


0.07 


0.05 0.06 
PMF: " 
0.04 
ш 0.03 


0.02 
0.01 
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“ 2 


数 和 





az 






数 个 独立 Uniform #3 E 28 €f о 





X1 X4 TAX. 


0.07 0.08 
0.06 
0.05 0.06 
РМЕ: : 
а р 0.04 
Ue 0.02 
0.01 
Panal | кл i 
E: 0 5 10 00 0 10 20 ET ii Г 0 10 20 š 30 
Prof. Yeh, Ping-Cheng (Benson) 3 i5 x 38 
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数 个 独立 Uniform ВА К 1% S£ {о 





PMF: 2 
0.04 
e 0.03 


ОЕ l kanmi 
-5 Ü 5 10 -10 Ü 10 20 -20 -10 Ü 10 20 30 
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数 个 独立 Uniform ВА К 1% S£ {о 





0.07 0.08 
0.06 
DE 0.06 
PMF. š 
А m 0.04 
Uu 0.02 
0.01 
0 0 o Lat kanmi 
-5 0 5 10 -10 0 10 20 20 -10 0 10 20 30 





Гай 
0 И и 


X +. X, X +. ^X: 
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数 个 独立 Uniform že #4 pä 14% £% р 





PMF: 





PT. -20 Ü 20 40 60 40 -20 0 20 40 50 


Xi T. +X, Xi T. T Xs ХХ 
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数 个 独立 Geometric K № ® о 





РМЕ: 





150 


X, + НХ. X. + л 


一 一 一 
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中 央 极 限定 理 (Central Limit Theorem) 





。 若 XXX № LLD. > 
R| ж n АЙЛУ л: 


2 
X = X4 + X? tct Xn “N (Mx ex, exp OX1+X2..+Xn ) 





ИХ. exo X, — Их; 十 Hy, т". tHx, — nHx, 


2 _ 2 2 2 _ „2 
ОХ. +х...+х, = Ох, T Ох, ТТ Оу = ПОХ, 
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7 


中 央 极 限定 理 (СТТ) 的 应 用 
Д\ | S 


ЗАНЯТА ШШ № 
和 时 ， 我 们 可 以 CLT 将 其 机 率 分 体 近 似 为 
US ONCE TL S 

° 7 OMA AE Їп SF IPIS Z B5) xr К 2 SE XX 
Bu › UJ 2 АНТ 

zoo аА | | 
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中 央 极 限定 理 (CLT) 的 应 用 


° Ex: RALEA KABARA o GLARE A L 
— 8) Ee ñ < ЛЛ а) CD ñ £ = A Е 
TR ETE SAIS] ALBIS E SR E Аё 38. 209.80. 








pue _ 1000000! 
200801 / `200801!799199! ме _ Х-/х 


ХЕХ, + X; 十 … 十 X1000000 X;^Bernoull((0.2)5 их, = 0.2,02 = 0.16 
Ву CLT 2 X-N 人 их, 1000000 . ot > Hx = 200000 Gx = 400 
: 4 y! | 


A 

—— ——\ Ox 
EE P(x > 200800) = P F 1D LAE dr 200000) _ P(Z > 2) = Q(2) = 0.023 
7 и а и 





= X Ú< AEN) ES Sé о... 
° 我 们 可 以 算 的 更 精确 | ¿ya 


° De Molvre — Laplace Formula: 









К1-0.5-пих, < Х-пих; Р D 


Vnox 











k. + 0.5 —n К. — 05 n 
Е аа _ eu Пил, 
y n0 x, vno x, 


(Фе) < В (г) + -- + f Ce) 


> (f. R kolt! Pikti) 一 一 二 foe) 





-05 Ка k2% 
Ае ng-Che о, fo 
nal Tai 


berto of EE, Natio 
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ti 






E X x< BEC ERI Яо... 


。 Ex: = 2 5566 & 4*3 4c doo 20 я PA 
Я CD BRERA IR” £h EOS 
$8 F] = Я #1] 7 "үн ; 

X-BIN(20,0.5) > рх(7) = . 0.57- 0.513 


ВВЕ: 
Х~ВІМ(20, 0. 5) — X 一 Х1 十 X» 二 как 十 Xo, 


(Xj I.I. D., X;- Bernoulli(0. 5), их, = 0.5/6, = 0.25 
> Х-М№М(20-0.5,20.0.25) = N(10,5 


> Px (7) = P(7 < X< 7) = Ф 
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139 T9] ER 


° [5 АН du ау Ж 2 2 
° Ze] X MGE ? 





”多 个 随机 变数 之 和 如 何 找 机 好 分 体 ? 


中 央 极 限定 理 (万 佛 朝宗 】 
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